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第 1 章 运筹 学 概述 


运筹 学 (Operations Research，OR) 作为 科学 名 词 出 现在 20 世纪 30 年 代 末 。 
第 二 次 世界 大 战 期 间 ， 运 筹 学 的 研究 与 应 用 范围 主要 是 战略 、 战 术 方面 。 随 着 世 
界 性 战争 的 结束 ， 各 国 开始 快速 发 展 经 济 ， 世 界 范 围 内 的 剧烈 竞争 也 体现 在 经 
济 、 技 术 方面 ， 运 筹 学 的 研究 也 向 这 些 方面 拓展 。 运 筹 学 为 了 适应 时 代 的 要 求 ， 
在 近 几 十 年 中 ， 无 论 从 理论 上 还 是 应 用 上 都 得 到 了 快速 的 发 展 。 在 应 用 方面 ， 今 
天 运筹 学 已 经 涉及 了 服务 、 管 理 、 规 划 、 决 策 、 组 织 、 生 产 、 建 设 等 诸多 方面 ， 
甚至 可 以 说 ， 很 难 找 出 它 涉 不 到 的 领域 。 在 理论 方面 ， 由 于 运筹 学 的 需要 和 刺激 
而 发 展 起 来 的 一 些 数学 分 支 ， 如 数学 规划 ， 应 用 概率 与 统计 、 应 用 组 合 数学 、 对 
策 论 、 数 理 经 济 学 、 系 统 科学 等 ， 都 得 到 了 迅速 发 展 。 

运筹 学 是 一 门 应 用 科学 ， 很 难 给 出 一 个 确切 的 定义 。 根 据 运筹 学 工作 者 的 一 
些 论述 ， 我 们 可 以 较 深切 地 理解 这 门 科 学 的 内 涵 。 运 筹 学 工作 的 先驱 、 诺 贝尔 奖 
金 获 得 者 、 英 国 著名 物理 学 家 P. M. S. Blackett 在 1940 年 就 开始 从 事 运 筹 学 方面 
的 研究 与 应 用 。 他 曾 多 次 指出 : 运筹 学 的 一 个 明显 的 特征 ， 正 如 目前 所 实践 的 ， 
是 它 有 或 应 该 有 一 个 严格 且 实 际 的 性 质 ， 其 目标 是 帮助 人 们 找 出 一 些 方法 ， 来 改 
进 正 在 进行 中 的 或 计划 在 未 来 进行 的 作战 效率 。 为 了 达到 这 一 目的 ， 要 研究 过 去 
的 作战 来 明确 事实 ， 要 得 出 一 些 理论 来 解释 事实 ， 最 后 利用 这 些 事 实 和 理论 对 未 
来 的 作战 作出 预测 。 我 们 可 以 还 列 出 一 些 论 述 : 运筹 学 是 “为 决策 机构 在 对 其 
控制 下 业务 活动 进行 决策 时 ， 提 供 以 数量 化 为 基础 的 科学 方法 ”“ 运 筹 学 是 一 
门 应 用 科学 ， 它 广泛 运用 现 有 的 科学 技术 知识 和 数学 方法 ， 解 决 实际 中 提出 的 专 
门 问题 ， 为 决策 者 选择 最 优 决 策 提供 定量 依据 .”“ 运 筹 学 是 一 种 给 出 问题 的 坏 
答案 的 艺术 ， 否 则 ， 问 题 的 结果 会 更 坏 。” 实 质 上 ， 运 筹 学 的 基本 目的 是 找到 
“ 优 ” 的 方案 、 途 径 ， 而 在 实际 中 ， 最 优 只 能 是 一 种 理想 追求 。 由 于 问题 的 复杂 
性 ， 各 种 确定 与 不 确定 因素 的 综合 影响 ， 运 筹 学 目标 准确 〈 或 有 保障 的 ) 定位 ， 
应 该 是 通过 研究 使 我 们 避 开 更 坏 的 结果 。 从 哲学 角度 讲 ， 我 们 可 以 说 运筹 学 就 是 
用 科学 方法 去 了 解 和 解释 运行 系统 的 现象 。 它 在 自然 界 范围 内 所 选择 的 研究 对 象 
就 是 这 些 系统 。 这 些 系统 时 党 包含 着 人 和 在 自然 环境 中 运行 的 “机 器 " ， 这 个 广 
义 的 “机 器 ”可 以 推广 为 按照 公认 的 规则 运行 的 复杂 社会 结构 。 、 

我 们 称 运 筹 学 是 一 门 科学 ， 是 因为 它 用 科学 方法 来 创建 其 知识 。 它 与 其 他 科 
学 的 不 同 之 处 在 于 ， 它 研究 的 是 运行 系统 的 现象 ， 这 在 其 他 科学 中 往往 被 忽略 。 
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根据 上 述 讨论 ， 我 们 可 以 体会 到 ， 运 筹 学 的 思想 就 是 对 我 们 所 关心 的 对 象 《“ 机 
器 ”或 运行 系统 ) 进行 深入 的 了 解 、 分 析 和 研究 ， 特 别 是 进行 量化 分 析 ， 得 到 
信息 ， 再 合理 运用 有 关 的 数学 工具 、 系 统 方法 等 进行 研究 ， 提 出 有 效 方案 来 解决 
问题 。 


1.1 运筹 学 的 特点 及 其 应 用 


1.1.1 朴素 运筹 学 思想 及 其 深刻 内 酒 


自从 1956 年 引 和 以来， 运筹 学 在 我 国 已 有 四 十 多 年 的 历史 。 经 过 这 四 十 多 
年 ， 运 筹 学 在 我 国有 了 很 大 的 发 展 ， 确 立 了 它 在 经 济 建设 中 的 地 位 。 但 是 ， 运 筹 
学 在 我 国 的 发 展 状况 与 世界 其 他 国家 相 比 ， 尚 有 不 小 的 差距 ， 其 中 最 主要 的 是 认 
识 与 基础 的 问题 。 人 们 公认 ， 将 “Operations Research” 译 为 “运筹 学 ”最 恰当 。 
我 国 历史 上 ， 在 军事 和 科学 技术 方面 对 运筹 思想 的 运用 是 世界 著名 的 ， 从 春秋 战 ， 
国 和 三 国 时 期 的 战争 中 就 可 举 出 很 多 运用 运筹 思想 取得 战争 胜利 的 例子 。 这 反映 
出 运筹 学 注意 系统 数据 采集 、 分 析 并 研究 优化 方案 的 思想 是 一 种 朴素 、 自 然 的 思 
想 。 实 际 上 ， 很 多 人 都 在 自觉 不 自觉 地 运用 这 种 思想 。 另 一 方面 ， 我 们 常 说 
“ 道 高 一 尺 ， 麻 高 一 丈 " ， 在 竞争 中 ， 各 方 共同 运用 这 些 思想 解决 问题 时 ， 就 表 
现 为 对 运筹 学 内 涵 研 究 、 运 用 能 力 的 提升 。 随 着 科学 技术 的 发 展 ， 特 别 是 信息 社 
会 的 到 来 ， 运 筹 学 内 涵 不 断 扩 大 ， 涉 及 的 数学 及 其 他 基础 科学 的 知识 越 来 越 多 ， 
于 是 熟练 掌握 并 运用 这 门 学 科 有 效 解决 实际 问题 的 难度 也 逐渐 加 大 。 根 据 运筹 学 
的 发 展 ， 数 学 、 计 算 机 科学 及 其 他 新 兴学 科 的 最 新 知识 、 技 术 都 能 很 快 融 人 其 
中 ,特别 是 人 的 直接 参与 决策 ， 使 得 运筹 学 发 展 更 进入 一 个 思 新 的 阶段 。 这 一 切 
与 我 国 科技 发 展 的 现状 决定 了 我 们 必须 加 强 对 运筹 学 的 研究 与 应 用 ， 只 有 这 样 才 
能 逐步 缩短 与 世界 发 达 国家 的 臣 离 。 


1.1.2 运筹 学 研究 的 工作 步骤 


为 了 有 效 地 应 用 运筹 学 ， 应 当 遵 循 下 列 六 条 原则 : 合伙 原则 、 催 化 原则 、 独 
立 原则 、 互 相 渗透 原则 、 宽 容 原则 和 平衡 原则 。 这 些 原则 反映 了 运筹 学 工作 者 与 
其 他 各 种 因素 的 横向 和 纵向 的 联系 。 运 筹 学 研究 的 工作 步 又 可 以 归纳 为 以 下 九 个 
内 容 : 

(1) 目标 的 确定 。 即 确定 决策 者 期 望 从 方案 中 得 到 什么 。 这 个 目标 不 应 限 
制 在 过 分 狭小 的 范围 内 ， 但 也 要 避免 不 必要 的 扩大 ;目标 可 以 是 一 个 ， 也 可 以 是 
多 个 ， 随 着 和 谐 社会 的 发 展 ， 实 际 决策 中 都 要 考虑 各 个 群体 的 利益 ， 以 至 于 多 目 
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标 规划 目前 在 现实 生活 中 越 来 越 多 地 被 使 用 了 。 

(2) 方案 计划 的 研制 。 实 施 一 项 运筹 学 研究 的 过 程 常 常 是 一 个 创造 性 的 过 
程 ， 计 划 的 实质 是 规定 出 要 完成 某 些 子 任务 的 时 间 ， 然 后 创造 性 地 按时 完成 这 一 
系列 任务 。 这 样 做 能 够 推动 运筹 学 分 析 者 得 出 结论 ， 有 助 于 方案 的 成 功 。 对 计划 
的 任意 延期 和 误 时 会 导致 分 析 者 的 消极 工作 和 管理 者 的 漠不关心 。 

(3) 问题 的 表述 。 这 项 工作 的 开展 需要 与 管理 人 员 进 行 深 入 讨论 ， 经 常 包 
括 与 其 他 职员 和 业务 人 员 的 接触 ， 采 集 必 要 的 数据 ， 以 便 了 解 问题 的 本 质 、 历 史 
及 未 来 ， 以 及 问题 各 个 变量 之 间 的 关系 。 这 项 任务 的 目的 是 为 研究 中 的 问题 提供 
一 个 模型 框架 ， 并 为 以 后 的 工作 确立 方向 。 在 这 里 ， 第 一 要 考虑 问题 是 否 能 够 分 
解 为 若 于 串 行 或 并 行 的 子 问题 ; 第 二 要 确定 模型 建立 的 细节 ， 如 问题 斥 度 的 确 
定 、 可 控制 决策 变量 的 确定 、 不 可 控制 状态 变量 的 确定 、 有 效 性 度量 的 确定 和 各 
类 参数 、 常 数 的 确定 。 

(4) 模型 的 研制 。 模 型 是 对 各 变量 关系 的 描述 ， 是 成 功 解决 问题 的 关键 。 
构成 模型 的 关系 有 几 种 类 型 ， 常 用 的 有 定义 关系 、 经 验 关系 和 规范 关系 。 

(5) 计算 手段 的 拟定 。 在 模型 研制 的 同时 ， 需 要 研究 如 何 用 数值 方法 求解 
模型 ， 其 中 包括 对 问题 变量 性 质 〈 确 定性 、 随 机 性 、 模 类 性 ) 、 关 系 特 征 〈 线 
性 、 非 线性 ) 、 手 段 〈 模 拟 、 优 化 ) 及 使 用 方法 〈 现 有 的 、 新 构造 的 ) 等 的 确 
定 。 例 如 ， 对 于 一 个 模型 可 能 有 许多 算法 可 以 适用 ， 有 的 算法 计算 时 间 长 但 计算 
结果 质量 高 ， 有 的 算法 计算 时 间 快 但 计算 结果 的 质量 相对 较 差 ， 如 何 根据 实际 需 
要 选择 有 效 的 算法 ， 也 是 运筹 学 问题 求解 中 重要 的 一 环 。 

(6) 程序 明细 表 的 编制 ， 程 序 设 计 和 调试 。 对 于 计算 过 程 需要 编制 程序 来 
实现 计算 机 运算 的 ， 运 算 学 研究 应 包含 算法 过 程 的 描述 、 计 算 流 程 框图 的 绘制 。 
程序 的 实现 及 调试 可 以 交 由 程序 员 完 成 ， 或 会 同 程序 员 完成 。 

(7) 数据 收集 。 把 有 效 性 试验 和 实行 方案 所 需 的 数据 收集 起 来 加 以 分 析 ， 
研究 输入 的 灵敏 性 ， 从 而 可 以 更 准确 地 估计 得 到 的 结果 。 

(8) 方案 验证 。 验 证 在 运筹 学 的 研究 与 应 用 中 的 重要 性 无 论 怎 样 强调 都 不 
会 过 分 。 验 证 包括 两 个 方面 : 第 一 是 确定 验证 模型 ,包括 为 验证 一 致 性 、 灵 敏 
性 、 似 然 性 和 工作 能 力 而 设计 的 分 析 与 实验 ; 第 二 是 验证 的 进行 ， 即 把 前 一 步 收 
集 到 的 数据 用 来 对 模型 作 完全 试验 。 这 样 一 种 试验 的 结果 ， 往 往 使 模型 必须 重新 
设计 ， 并 要 求 与 之 相 联系 的 程序 重 编 。 

(9) 方案 实施 。 运 筹 学 分 析 者 往往 认为 ， 在 模型 验证 后 ， 任 务 就 完成 了 ， 
这 是 不 对 的 。 事 实 上 ， 一 项 研究 的 真正 困难 往往 在 方案 的 最 后 一 步 ， 即 在 实施 和 
维护 时 才 暴 露出 来 。 因 此 要 使 得 整个 研究 有 效 ， 必 须 和 那些 与 所 研究 的 决策 问题 
相关 的 各 职能 的 各 级 管理 人 员 进 行 合作 ， 并 让 他 们 参与 其 中 。 
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1.2 ”运筹 学 建 模 . 


1.2.1 运筹 学 建 模 的 一 般 思路 


运筹 学 建 模 在 理论 上 应 属于 数学 建 模 的 一 个 部 分 。 因 此 ， 运 筹 学 建 模 所 采用 
的 手段 、 途 径 就 是 数学 建 模 中 所 采用 的 。 本 节 所 要 介绍 的 ， 是 根据 运筹 学 本 身 的 
特征 来 处 理 建 模 问题 的 一 般 思路 。 

经 过 长 期 、 深 入 的 研究 和 发 展 ， 把 运筹 学 处 理 的 问题 归纳 成 一 系列 具有 较 强 
背景 和 规范 特征 的 典型 问题 。 因 此 ， 运 筹 学 建 模 就 要 把 相当 的 精力 放 在 将 实际 问 
题 合理 地 描述 为 某 种 典型 的 运筹 模型 。 在 这 个 过 程 中 ， 要 求 运 筹 学 工作 者 具有 以 
下 几 个 方面 的 知识 和 能 力 : 

(1) 热 悉 典 型 运筹 模型 的 特征 和 它 的 应 用 背景 ， 如 线性 规划 、 非 线性 规划 、 
整数 规划 、 层 次 分 析 法 (AHP) 等 。 

(2) 有 理解 实际 问题 的 能 力 ， 包 括 广 博 的 知识 、 搜 集 信息 、 资 料 和 数据 的 
能 力 。 

(3) 有 抽象 分 析 问 题 的 能 力 ， 包 括 抓 主要 矛盾 、 逻 辑 思维 、 推 理 、 归 纳 、 
联想 、 类 上 比 等 创造 能 力 。 

(4) 有 运用 各 类 工具 知识 的 能 力 ， 包括 运用 数学 知识 、 计 算 机 、 自 然 科学 
和 工程 技术 等 的 能 力 。 

(5) 有 试验 校正 、 维 护 修 正 模型 的 能 力 。 

根据 问题 本 身 的 情况 ， 按 照 上 节 的 讨论 ， 我 们 在 建 模 时 一 般 有 如 下 思路 : 

(1) 直接 方法 。 当 我 们 熟悉 问题 的 内 在 关系 、 特 征 以 及 运筹 学 的 典型 模型 
特点 时 ， 常 常 可 以 直接 得 到 一 些 问 题 的 模型 或 问题 归 类 ， 即 确定 问题 是 属于 线性 
规划 、 非 线性 规划 、 整 数 规划 、 排 队 模 型 等 的 哪 一 种 。 有 时 模型 的 参数 也 可 直接 
从 问题 本 身 得 到 。 

(2) 类 比方 法 。 通过 类 比 把 新 遇 到 的 问题 用 已 知 类 似 问题 的 模型 来 建立 该 
问题 的 模型 。 这 种 情况 往往 得 到 的 是 模型 归 类 ， 而 模型 参数 需 用 其 他 方法 取得 。 

(3) 模拟 方法 。 利 用 计算 机 程序 实现 对 问题 的 实际 运行 模拟 ， 可 得 到 有 用 
的 数据 。 这 些 效 据 常用 来 求 得 个 型 参数 或 对 所 建立 术 王 忆 下 机 全 个 下 本 下 站 
验 。 

(4) 数据 分 析 法 。 利用 数据 处 理 的 方法 分 析 各 数据 变量 之 间 的 关系 是 确定 
关系 还 是 相关 关系 ， 以 及 是 何 种 相关 等 。 这 种 方法 还 可 以 用 回归 分 析 找 出 变量 的 
变化 趋势 ， 从 而 得 到 合理 的 数学 模型 。 大 量 的 模型 参数 求 得 也 常常 使 用 数据 处 理 
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的 统计 方法 。 另 外 ， 回 归 模 型 常常 就 是 一 个 无 约束 最 优化 模型 。 

(5) 试验 分 析 法 。 通 过 试验 分 析 建 模 是 工程 管理 中 常用 的 方法 。 以 局 部 的 
试验 产生 数据 ， 经 过 统计 处 理 得 到 总 体 的 模型 或 模型 归 类 。 试 验 分 析 更 多 地 用 于 
产生 模型 参数 。 


1.2.2 运筹 学 模型 的 评价 


一 个 好 的 运筹 学 模型 ， 不 仅 能 比较 真实 地 反映 实际 向 题 ， 还 要 具备 以 下 几 个 
优点 : 

(1) 易于 理解 。 模 型 应 力求 简明 。 这 里 要 强调 一 点 ， 模 型 越 大 越 复杂 ， 不 
一 定 意味 着 越 好 。 应 当 把 实际 问题 中 那些 不 重要 的 因素 删 去 。 这 样 ， 一 方面 ， 形 
成 模型 以 后 ， 由 于 变量 和 约束 个 数 较 少 ， 便 于 计算 求解 另 一 方面 ， 也 更 易于 揭 
示 主 要 因素 对 问题 的 影响 以 及 它们 之 间 的 关系 。 

模型 中 的 变 元 、 函 数 符号 要 接近 所 代表 的 实际 因素 、 资 源 和 目标 的 原 义 ， 这 
样 易于 理解 模型 所 表示 的 实际 问题 的 结构 ， 而 且 当 变量 和 约束 个 数 很 多 时 ， 对 于 
模型 建立 和 解释 也 是 便利 的 。 

(2) 易于 探查 错误 。 如 果 上 面 一 点 做 得 比较 好 ， 那 么 模型 也 易于 探查 错误 。 
模型 的 错误 一 般 有 两 种 ，@ 书 写 错误 ; @ 模 型 与 实际 问题 不 符 。 后 一 种 错误 在 建 
立 模型 时 应 尽量 避免 ， 在 评价 模型 及 其 解 时 ， 也 可 以 找 出 错误 并 改正 。 前 一 种 错 
误 的 避免 ， 一 方面 要 求 细心 ， 另 一 方面 要 求 模型 的 书写 形式 要 规范 ， 变 量 次 序 最 
好 轿 定 不 变 。 如 果 在 某 个 函数 关系 中 不 出 现 某 个 变量 ， 那 么 该 变量 的 位 置 最 好 以 
空白 代替 ;在 约束 条 件 中 ， 把 等 式 约束 与 不 等 式 约束 分 成 两 组 ， 分 开 来 写 ， 而 在 
不 等 式 约束 中 又 可 以 把 “> ”不 等 式 与 “<” 不 等 式 分 开 来 写 。 为 便于 清楚 地 
表明 每 个 约束 所 代表 的 对 实际 资源 的 限制 ， 不 必 把 两 种 形式 的 不 等 式 统一 成 一 
种 。 

(3) 易于 计算 。 运 筹 学 模型 问题 是 否 易于 求解 ， 取 决 于 问题 的 规模 、 复 杂 
程度 、 当 前 的 计算 技术 水 平和 解 该 问题 的 算法 。 可 以 通过 以 下 几 个 途径 降低 问题 
的 复杂 程度 和 规模 ; 

1) 采用 简单 的 函数 。 与 其 在 建 模 时 花费 许多 时 间 、 精 力 ， 寻 找 很 好 地 反映 
现实 情况 但 非常 复杂 的 函数 ， 不 如 在 误差 允许 的 范围 内 ， 采 用 简单 的 函数 。 在 这 
一 点 上 ,尤其 应 该 注意 的 是 ， 非 线性 函数 在 计算 方面 的 困难 远 比 线性 函数 大 得 
多 。 
2) 删 去 不 必要 的 变量 和 约束 条 件 在 建立 模型 前 ， 分 析 问 题 时 就 应 该 注意 
把 那些 不 重要 的 因素 和 资源 限制 简化 掉 。 建 立 模型 后 ， 则 应 注意 删 去 那些 多 余 的 
约束 条 件 。 多 余 的 约束 条 件 是 指 该 约束 条 件 被 删 去 后 ， 可 行 解 集 没有 改变 。 一 个 
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简单 的 例子 是 : :+<1 和 +<6， 这 里 6>1， 那 么 条 件 ! <6 就 是 多 余 的。 尤其 要 删 
去 那些 非 线 性 的 约束 条 件 。 但 是 没有 实用 的 一 般 方 法 能 识别 模型 中 的 多 余 约 束 条 
件 。 尽 管 如 此 ， 在 求解 运筹 学 模型 前 ， 对 它 进行 一 番 数 学 上 的 分 析 、 讨 论 它 的 性 
质 仍 是 非常 必要 的 。 

3) 函数 变换 。 通 过 将 复杂 的 函数 进行 代数 处 理 ， 可 以 达到 降低 模型 复杂 程 
度 的 目的 。 

例如 : 
0 襄 + 和 ) 一 〈2i 有 

xi， 和 生 0 Xi 和 窒 0 

(2) JI < 呈 乞 %， lnx 三 lnc 


上 面 两 个 例子 分 别 根据 因 式 分 解 方法 和 连 乘 函 数 转 为 对 数 的 连 加 函数 的 广 
法 ， 从 计算 的 角度 对 约束 函数 进行 了 简化 。 


12.3 运筹 学 模型 的 求解 


解决 一 类 优化 问题 ， 一 般 会 有 多 种 算法 可 供 选择 ， 某 些 特别 的 问题 也 有 专门 
的 算法 处 理 。 某 个 算法 对 某 类 问题 特别 有 效 ， 但 对 于 其 他 问题 也 许 根本 不 起 作 
用 。 建 立 模型 时 ， 要 注意 到 哪些 算法 对 求解 该 类 问题 是 有 效 的 ， 在 计算 误差 与 计 
算 时 间 人 允许 的 范围 内 ， 选 择 那 些 相对 比较 有 效 的 算法 去 求解 该 问题 。 因 此 ， 模 型 
建立 者 应 对 优化 算法 进行 系统 的 了 解 ， 熟 悉 每 种 算法 的 优势 与 缺点 。 例 如 以 下 两 
类 问题 对 算法 的 速度 要 求 较 高 : 

例 1-1: 投资 组 合 优化 配置 就 是 优化 算法 在 金融 中 的 主要 应 用 。 由 于 市 场 的 
行情 时 刻 在 变化 ， 原 有 投资 组 合 在 当前 的 市 场 情 况 中 是 否 最 优 ， 直 接 决 定 着 该 组 
合 的 收益 。 对 于 投资 组 合 包含 投 资 品种 较 多 的 时 候 〈 例 如 醋 P. 摩根 管理 着 四 千 
多 种 资产 ) ， 优 化 问题 的 计算 量 巨大 ， 在 有 限 的 时 间 内 得 到 全 局 最 优 似乎 不 可 
能 ， 而 且 市 场 的 信息 多 数 也 是 不 精确 的 ， 对 于 这 些 不 精确 的 参数 即使 求 出 全 局 最 
优 解 ， 解 的 实际 精度 也 会 遭 到 质疑 。 如 果 将 投资 组 合 优化 系统 做 成 实时 系统 似乎 
也 不 太 现实 ， 一 般 只 要 求 在 原 有 投资 组 合 的 配置 下 根据 市 场 变化 有 所 改进 就 可 接 
受 。 

例 1-2: 炼油 设备 中 的 压力 控制 系统 在 相关 参数 基本 确定 的 情况 下 ， 管 道内 
压力 的 大 小 决定 着 炼油 效率 的 高 低 ， 但 压力 的 变化 又 同时 影响 着 其 他 参数 。 这 样 
的 一 个 压力 优化 控制 系统 必须 是 实时 的 ， 但 该 优化 问题 的 目标 函数 中 涉及 了 复杂 
的 流体 力学 的 偏 微分 方程 求解 问题 。 这 类 问题 不 可 能 在 短 时 间 内 求 得 最 优 解 ， 只 
能 在 规定 的 反应 时 间 内 求 得 较 有 效 解 。 
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在 实践 中 ， 最 优化 算法 是 求解 运筹 学 问题 时 使 用 的 主要 算法 。 根 据 优化 算法 
理论 发 展 与 算法 原型 将 现 有 的 最 优化 算法 分 为 : 经 典 优化 算法 和 启发 式 优化 算法 
两 大 类 。 经 典 优化 算法 和 启发 式 优化 算法 都 是 选 代 算法 ， 但 是 ， 它 们 又 有 很 大 区 
别 ， 如 : 

(1) 经 典 算法 以 一 个 可 行 解 为 迭代 的 初始 值 ， 而 启发 式 算法 以 一 组 可 行 解 
为 初始 值 。 

(2) 经 典 算法 的 搜索 策略 为 确定 型 的 ， 而 启发 式 算法 的 搜索 策略 是 结构 化 
和 随机 化 的 。 

(3) 经 典 算法 大 多 都 需要 导数 信息 ， 而 启发 式 算法 仅 用 到 目标 函数 值 的 信 
息 。 

(4) 经 典 算法 对 函数 性 把 有 着 六 格 要 求 ， 而 启发 式 算 法 对 函数 性 质 没 有 太 
大 要 求 。 

(5) 经 典 算法 的 计算 量 要 比 启发 式 算法 小 很 多 ， 比 如 ， 对 于 规模 较 大 且 了 画 
数 性 质 比较 差 的 优化 问题 ， 经 典 算法 的 效果 不 好 ， 但 一 般 的 启发 式 算法 的 计算 量 
太 大 。 

在 计算 时 ， 优 化 算法 的 迭代 过 程 主要 由 找寻 搜索 方向 和 确定 搜索 步 长 组 成 。 
搜索 方向 和 搜索 步 长 的 选取 决定 了 优化 算法 的 搜索 广度 和 搜索 深度 。 经 典 优化 算 
法 和 启发 式 优化 算法 的 区 别 主要 是 其 搜索 机 制 不 同 。 经 典 算法 的 搜索 方向 和 搜索 
步 长 是 由 局 部 信息 〈 如 导数 ) 决定 的 ， 所 以 一 般 只 能 对 局 部 进行 有 效 的 深度 搜 
索 ， 而 不 能 进行 有 效 的 广度 搜索 ， 所 以 经 典 优化 算法 很 难 跳出 局 部 最 优 ; 启发 式 
优化 算法 为 了 避免 像 经 典 优化 算法 那样 陷 人 局 部 最 优 ， 采 用 了 相对 有 效 的 广度 搜 
索 ， 但 是 在 问题 规模 较 大 的 时 候 ， 这 样 做 的 结果 往往 使 得 计算 量 难以 承受 。 

纵 观 优化 算法 的 发 展 ， 完 美的 算法 是 不 存在 的 。 常 用 来 评价 算法 好 坏 的 标准 
有 : 

(1) 算法 收敛 速度 。 

(2) 算法 使 用 范围 〈 普 适 性 ) 。 

(3) 算法 的 时 间 复 杂 度 。 

(4) 算法 得 到 解 的 质量 (局 部 性 或 全 局 性 ， 对 绝对 最 优 解 的 近似 程度 ) 。 

(5) 算法 的 可 实现 性 。 

可 以 说 这 些 标 准 是 不 可 公 度 的 (不 可 能 同时 都 好 ) 。 以 全 局 最 优 问题 为 例 ， 
如 果 要 求 计 算 时 间 少 ， 那 么 搜索 广度 就 无 法 保证 ， 解 的 质量 就 差 ;如 果 要 求 收敛 
速度 快 ， 就 需要 有 效 的 搜索 方向 ， 有 了 搜索 方向 就 降低 了 搜索 广度 ， 这 样 解 的 全 
局 最 优 性 无 法 保证 。 

计算 复杂 性 理论 ， 全 局 优化 问题 是 NP-complete 问题 ， 一 般 根 据 实际 问题 采 
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用 不 同 的 启发 式 算法 。 算 法 的 评价 标准 不 可 公 度 ， 而 且 在 具体 问题 中 ， 这 些 标准 
也 不 是 等 重要 的 。 比 如 某 些 问 题 对 解 的 要 求 降低 10% ， 它 的 计算 时 间 就 可 以 减 
少 50% ， 这 样 做 是 否 值得 ， 要 根据 实际 情况 而 定 。 


1.3 基本 概念 和 符号 


1.3.1 空间 与 向 量 


本 书 的 算法 理论 是 建立 在 ” 维 欧 氏 空间 基础 上 的 ， 书 中 使 用 下 列 符号 ; 
R“ 表示 维 欧 氏 空间 : xseR`， 表 示 x 为 R" 中 的 向 量 ， 若 不 进行 特殊 说 明 ， 
本 书 中 z = (2 ，2，…，‰) ， 其 中 x 为 二 的 第 ; 维 分 量 ， 符 号 “T” 表 示 转 置 。 


设 x， ye R"，z，y 的 内 积 记 为 zy = 袜 xy; ， 在 不 加 说 明 时 ， 我 们 用 


1 .1 表示 2 范 数 ，1z1 = \/ 半 雪 。 


1.3.2 梯度 向 量 与 Hesse 矩阵 


设 几 zx) :R' 一 RF 二 次 可 微 。 
定义 : 设 /z) 在 SCR" 上 有 定义 ,zx sintS, 若 3peR", 使 得 YreS, 有 : 


Jr) =Fzo ) +pT(r -xzo)+|z-xola(z-xo) (1-1) 
其 中 ,lima(z -zz ) =0, 则 称 扩 xz) 在 x' 处 可 微 ,向 量 忆 为 在 xz 处 的 梯度 , 记 
为 :;VFz@) ) =p。 了 


如 果 进 一 步 存 在 对 称 的 m 阶 方 阵 如 ,使 得 YzeS, 有; 
JKz) =FKzfo ) +pT( 庆 -0 ) + 人 -CD) BCr -Yo ) +|z -xc 有 BCr,xz'o ) 
(1-2) 

其 中 ，JinmuB(z -zx ) =0, 则 称 几 rz) 在 xf) 处 二 阶 可 微 , 方 阵 吾 成 为 上 在 zt 处 的 
Hesse 矩阵, 记 为 : Y2Xz@) ) = 吾 。 

不 难得 到 , 当 xz) 在 xz" 处 二 阶 可 微 时 : 

{0) 《0) (0 了 
wz) ={ 多 一 台 ,a 一 )] 
Dx 


1 0x> 9X 本 
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9327KxCO) ) azto ) 本 ax ) 


xf Dx28xi Bx ,8xi 
az ) az ) ax) 


Vzf(zto ) =| axiax> xz Dx By (1-3) 


ar) ax) ez) 


axiax。 gaxgx， 3 
xz) 在 x 处 的 一 阶 泰勒 展开 式 为 : 
Frz) =Fxto) +VYFrzo)TOE -x+o(llz-zxeoxll) (1-4) 


(xz) 在 xo) 处 的 二 阶 泰 勒 展开 式 为 : 
xz) =zrto ) 十 VCzto )T(z -zto) ) + ， 


林 (z -xC0)7TV2F(zo )(z -zxo) +ofjlz 一 zc 人) (1-5) 


1.3.3 点 和 方向 


在 解数 学 规划 问题 时 ,常常 要 涉及 选 代 点 和 搜索 方向 ,点 和 方向 在 尺 中 都 是 
向 量 ,我 们 涉及 的 点 是 了 R* 中 的 一 个 轿 定 的 向 量 ,一 般 吕 M 
用 x,y,z,… 来 标记 ;本 书 中 谈 到 的 方向 ,是 指 非 夫 自 
由 向 量 , 它 有 国定 的 长 度 和 方向 ,但 起 点 可 以 移动 ,一 4 
般 用 ds，… 来 标记 。 
如 x+ hd, 表示 从 点 出 发 沿 方 向 d, 移 动 4 长 度 
的 人 们 所 得 到 的 向 量 , 如 图 1-1 所 示 。 函 数 7(z), 表 “< 
示 沿 这 个 方向 的 斜率 为 扩 (z + Ad) -= Y(z)z8， 图 111 
称 关于 的 二 阶 导 数 为 函数 开 z) 沿 此 方向 的 曲率 。 
JP"(z+Ad)o= 开 Fr)Id 
定义 : SCR", 非 空 :3 一 R,zeS,dEeR" ,dzx0, 使 当 和 >0 充分 小 时 有 工 +Ad 
< S ,如果 极 限 jin 太 工 Ac -信守 存 在 (包括 到 + ), 则 称 太 在 点 沿 方 向 
导数 , 记 为， 
(ri = 


显然 , 当 丰 在 zx 点 可 微 时 .P(zr;id) = YF(z)rd。 


第 2 章 基本 概 仍 和 基本 理论 


凸 分 析 是 运筹 学 的 支柱 性 理论 ， 优 化 理论 大 多 建立 在 凸 集合 与 凸 规划 的 基础 
之 上 。 进 而 ， 根 据 优化 问题 可 行 解 集合 、 目 标 与 约束 函数 的 凸 性， 将 优化 问题 的 
解 分 为 局 部 最 优 解 与 全 局 最 优 解 。 目 前 ， 优 化 算法 种 类 繁多 ， 根 据 其 优化 理论 ， 
将 现 有 优化 算法 分 为 经 典 优化 算法 与 启发 式 优化 算法 。 运 筹 学 与 最 优化 的 发 展 与 
其 他 科学 理论 的 发 展 密切 相关 ， 如 数值 计算 、 计 算 复杂 性 等 。 

本 章 将 主要 对 凸 集 合 与 凸 规划 、 局 部 最 优 解 与 全 局 最 优 解 、 经 典 优化 算法 与 
启发 式 优化 算法 、 数 值 计算 与 计算 复杂 性 等 作 综述 性 的 简单 介绍 。 


2.1 基本 概念 


在 现实 生活 中 ， 许 多 重要 的 问题 都 涉及 选取 一 个 最 好 的 目标 ， 或 者 为 达到 这 
个 目标 而 选择 某 些 参数 、 确 定 某 些 值 ， 这 些 问题 都 可 以 归结 为 最 优化 问题 。 对 于 
一 个 最 小 值 问 题 ， 其 数学 规划 模型 的 一 般 形 式 为 : 
min 六 (z) 
、 “1) 评 ES 人 
其 中 ，SCR" 为 约束 集合 或 可 行 集 ; F: S 一 R 为 目标 画 数 ; 若 xeS， 则 称 x 为 问 
题 LA) 的 可 行 解 。 显 然 ， 只 要 改变 目标 函数 的 符号 ， 最 大 值 问题 就 可 以 转变 成 
最 小 值 问 题 。 因 此 ， 本 书 一 般 以 最 小 值 问题 为 标准 。 解 决 最 优化 问题 的 算法 称 为 
最 优化 算法 ， 可 以 分 为 经 典 优化 算法 和 启发 式 优化 算法 。 
若 x"e3S， 且 满足 YrzeS, yj (rz") < (xz)， 则 称 x "是 问题 () 的 最 优 
解 ， 记 为 opt 。 对 于 广 = 太 (*" ) ， 称 之 为 问题 (R) 的 最 优 值 。 
定义 2-1 考虑 问题 (6) ， 设 xz" <S， 有 : 
(1) 若 YxzeS, 恒 有 xz" ) 三 fxz), 则 称 x" 是 问题 ( 卢 ) 的 全 局 最 优 解 , 记 为 
多 opt〈 中 obal optimum ) 或 opt 。 若 当 x 关 x "时 ,严格 不 等 式 Fz* ) <Fz) 成 立 , 则 
称 z "是 问题 (人 ) 的 严格 全 局 最 优 解 。 
(2) 若 存在 x "的 邻 域 W(xz * ) ,使 得 YxzeSnmNw(z") 恒 有 jz*)<Fz), 则 称 
xz "是 问题 ( 态 ) 的 局 部 最 优 解 , 记 为 1 opt:(local optimum) ; 若 当 x* 关 zx" 时 ,严格 不 等 
式 扩 xz ”) <Fz) 成 立 , 则 称 x" 是 问题 (大 ) 的 严格 局 部 最 优 解 。 
定义 2-2 设 SCR", 若 对 于 任意 zt ,ze eS,Ae[0,1], 均 有 Ar +(1- 
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A)xze2 seS, 则 称 集合 S 为 凸 集 。 

由 定义 易 知 , 凸 集 的 几何 意义 是 ,对 于 非 空 集合 SCR", 连 接 $ 中 任意 两 点 
xz) 的 线段 仍 属于 该 集合 。. 

为 了 便于 归 类 和 讨论 ,规定 空 集 纪 为 凸 集 , 单 点 集 {x| 为 凸 集 。 


定义 2-3 设 x CD E 有 ”=0,I=1,2,…,m, 是 》 和， 到 , 则 称 
= 


记 入 GO 为 点 0) ,人 人 ,于 人) 的 凸 组 合 。 
二 


设 SCR" ,由 S 中 所 有 有 限 点 的 凸 组 合 构成 的 集合 为 凸 集 , 称 为 S 的 凸 包 , 记 
作 cov(S) 。 显 然 , 若 3 为 凸 集 , 则 S$=cov(S)。 


2.2 经 典 优化 算法 


2.2.1 线性 最 优化 


线性 最 优化 又 称 线性 规划 ， 是 运筹 学 中 应 用 最 广泛 的 一 个 分 支 。 这 是 因为 自 
然 科 学 和 社会 科学 中 许多 问题 都 可 以 近似 转化 成 线性 规划 问题 。 
线形 规划 的 一 般 形 式 为 : 
Imjin z =C1Xi 十 C2X2 十 十 CaoXn 
S, t QiIXI 十 GoX2 十 十 GinX 天 四 
GDX1 十 GozX2 十 … 十 CanX < 四 
(2-2) 
axXl + aaaxa 二 十 GaXssD 
Xi ，20，… Xu EPE0 
线性 规划 理论 和 算法 的 研究 及 发 展 共 经 历 了 三 个 发 展 阶段 ,每 个 阶段 都 引起 
了 社会 的 极 大 关注 。 线 性 规划 研究 的 第 一 高 潮 是 著名 的 单纯 形 法 的 研究 。 这 一 方 
法 是 Dantzig 在 1947 年 提出 的 ， 它 以 成 熟 的 算法 理论 和 完善 的 算法 及 软件 统治 线 
性 规划 达 三 十 多 年 。 随 着 20 世纪 60 年 代 发 展 起 来 的 计算 复杂 性 理论 的 研究 , 单 
纯 形 法 在 70 年 代 未 受到 了 挑战 。1979 年 ， 前 苏联 数学 家 Khachiyan 提出 了 第 一 
个 理论 上 优 于 单纯 形 法 的 所 谓 多 项 式 时 间 算 法 一 一 椭 球 法 ， 曾 成 为 记 动 一 时 的 新 
闻 , 并 掀起 了 研究 线性 规划 的 第 二 个 高 潮 。 但 遗憾 的 是 ,广泛 的 数值 试验 表明 ， 
椭 球 法 的 计算 比 单纯 形 方 法 差 。1984 年 ，Karmarkar 提出 了 求解 线性 规划 的 另 一 
个 多 项 式 时 间 算 法 。 这 个 算法 从 理论 和 数值 上 都 优 于 椭 球 法 ,因而 引起 了 学 术 界 
的 极 大 关注 , 并 由 此 掀起 了 研究 线性 规划 的 第 三 个 高 潮 。 从 那 以 后 , 许多 学 者 致 
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力 于 改进 和 完善 这 一 算法 ， 得 到 了 许多 改进 算法 。 这 些 算 法 运用 不 同 的 思想 方法 
均 获 得 通过 可 行 区 域内 部 的 迭代 点 列 , 因此 统称 为 解 线性 规划 问题 的 内 点 算法 。 
目前 ， 面 对 大 规模 的 线性 规划 问题 ， 内 点 算法 将 以 不 可 抗拒 的 趋势 超越 和 替代 单 
纯 形 法 。 

目前 成 熟 的 解 线性 和 整数 规划 问题 的 软件 有 : Lindo、EQPS (线性 、 整 数 和 
非 线性 规划 ) 、FMP (线性 和 混合 整数 规划 ) 、HSV/LPLO (线性 规划 ) 、KORBX 
(线性 规划 ) 、LAMPS (线性 和 整数 规划 ) 、LPBLP (线性 规划 ) 、MILP (混合 整 
数 规划 ) 、MINTO (混合 整数 规划 ) 、MPSII (线性 和 混合 整数 规划 ) 、OML ( 线 
性 和 混合 整数 规划 ) 、0SL (线性 、 二 次 和 混合 整数 规划 ) 、PROCLP (线性 和 整 
数 规划 ) 、WB (线性 和 混合 整数 规划 ) 、WHIZARD (线性 和 混合 整数 规划 )、 
XPRESSMP (线性 和 混合 整数 规划 ) 等 。 


2.2.2 非 线性 最 优化 


非 线形 规划 的 一 般 形式 为 : 
min 成 x) 
stLgi(x)<0 iT=1,2,…) 妈 
及 (x*) =0 J 了 =1,2，……/ 
户 8 力 :有 R' 一 ,其 中 至 少 有 一 个 为 非 线 性 函数 
有 mm 个 不 等 式 约束 条 件 
有 1 个 等 式 约 东 条件 
非 线性 规划 的 一 个 重要 理论 是 1951 年 提出 的 Kuhn-Tucker 最 优 条 件 (简称 
K-T 条 件 )， 此 后 的 50 年 代 主 要 是 对 梯度 法 和 牛顿 法 的 研究 。 以 Davidon 
(1959) ， 了 letcher 和 Powell (1963) 提出 的 DFP 方法 为 起 点 ,60 ~ 80 年 代 是 研究 
拟 牛 顿 方法 的 活跃 时 期 ， 同 时 对 共 配 梯度 法 也 有 较 好 的 研究 。 在 1970 年 ， 由 
Broyden ，Fletcher，GColdfarb 和 Shanno 从 不 同 的 角度 共同 提出 的 BFGCS 方法 是 目 
前 为 止 最 有 效 的 拟 牛顿 方法 。 由 于 Broyden ，Dennis 和 More 的 工作 使 得 拟 牛 顿 方 
法 的 理论 变 得 很 完善 ，70 年 代 是 非 线 性 规划 的 飞速 发 展 时 期 ， 约 东 变 尺度 
(SQP) 方法 (Han 和 Powell 为 代表 ) 和 Lagrange 乘 子 法 (代表 人 物 是 Powell 和 
Hestenes) 是 这 一 时 期 的 主要 研究 成 果 。 计 算 机 的 飞速 发 展 使 非 线性 规划 的 研究 
如 虎 添 翼 ，80 年 代 开 始 研究 信和 趟 域 法 、 稀 政 拟 牛 顿 法 、 大 规模 问题 的 方法 和 并 
行 计算 , 90 年 代 研 究 解 非 线性 规划 问题 的 内 点 法 和 有 限 储存 法 。 这 半 个 世纪 是 
最 优化 发 展 的 黄金 时 期 。 
与 线性 规划 相 比 ， 非 线性 规划 软件 还 不 够 完善 。 但 是 已 有 大 量 求解 非 线 性 规 
划 问 题 的 软件 ， 其 中 有 相当 一 部 分 可 从 互联 网 上 免费 下 载 。LANCELOT 是 由 
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Conn，Gould 和 Toint 研制 的 解 大 规模 最 优化 问题 的 软件 包 , 适合 求解 无 约束 最 优 
化 、 非 线性 最 小 二 乘 、 边 界 约束 最 优化 和 一 般 约 束 最 优化 问题 。 这 个 软件 的 基本 
思想 是 利用 增 广 Lagrange 函数 来 处 理 约束 条 件 ， 在 每 步 迭 代 中 解 一 个 边界 约束 优 
化 子 问题 ， 其 所 用 的 方法 结合 了 信赖 域 和 投影 梯度 等 技术 。MINPACK 是 美国 Ar- 
gonne 国家 实验 室 研 制 的 软件 包 ， 适 合 求解 非 线性 方程 组 和 非 线性 最 小 二 乘 问 
题 ， 所 用 的 基本 方法 是 阻尼 最 小 二 乘法 , 此 软件 可 以 从 网 上 图 书馆 获得 。PROC- 
NLP 是 SAS 软件 公司 研制 的 SAS 商业 软件 中 OR 模块 的 一 个 程序 ， 这 个 程序 适合 
求解 无 约束 最 优化 、 非 线性 最 小 二 乘 、 线 性 约束 最 优化 、 二 次 规划 和 一 般 约束 最 
优化 问题 。TENMIN 是 Sehnabel 等 研制 的 解 中 小 规模 问题 的 张 量 方法 软件 。 目 前 
成 熟 的 解 非 线性 最 优化 问题 的 软件 有 : Linge、CONOPT ( 非 线 性 规划 ) 、DOT 
(优化 设计 工具 箱 ) 、Excel and Quattro Pro Solvers (线性 、 整 数 和 非 线性 规划 ) 、 
FSQP ( 非 线性 规划 和 极 小 极 大 问题 ) 、GRG2 ( 非 线性 规划 ) 、LBFGS (有 限 储存 
法 ) 、LINDO (线性 、 二 次 和 混合 整数 规划 ) 、LSSOL (最 小 二 条 和 二 次 规划 )、 
MINOS (线性 和 非 线性 规划 ) 、NLPJOB ( 非 线性 多 目标 规划 ) 、OPTPACK (约束 
和 无 约束 最 优化 ) 、PETS ( 解 非 线 性 方程 组 和 无 约束 问题 的 并 行 算法 ) 、QPOPT 
(线性 和 二 次 规划 ) 、SQOPT (大 规模 线性 和 凸 二 次 规划 )、SNOPT (大 规模 线 
性 、 二 次 和 非 线性 规划 ) 、SPRNLP. ( 稀 朴 最 小 二 乘 ， 稀 疏 和 稠密 非 线性 规划 )、 
SYSFIT ( 非 线性 方程 组 的 参数 估计 )、TENSOLVE ( 非 线 性 方程 组 和 最 小 二 乘 )、 
VE10 ( 非 线 性 最 小 二 乘 ) 等 。 


2.3 启发 式 算法 


大 自然 是 神奇 的 ， 它 造就 了 很 多 巧妙 的 手段 和 运行 机 制 。 受 大 自然 的 启发， 
人 们 从 大 自然 的 运行 规律 中 找到 了 许多 解决 实际 问题 的 方法 。 对 于 那些 由 大 自然 
的 运行 规律 或 者 面向 具体 问题 的 经 验 、 规 则 启发 出 来 的 方法 ， 人 们 常常 称 之 为 启 
发 式 算法 〈 Heuristie Algorithm) 。 现 在 的 启发 式 算法 也 不 是 全 部 来 自然 的 规律 
也 有 来 自 人 类 积累 的 工作 经 验 。 

启发 式 算法 有 不 同 的 定义 : 一 种 定义 为 ， 一 个 基于 直观 或 经 验 构造 的 算法 ， 
对 优化 问题 的 实例 能 在 可 接受 的 计算 成 本 〈 计 算 时 间 、 占 用 空间 等 ) 内 ， 给 出 
一 个 近似 最 优 解 ， 该 近似 最 优 解 与 走 实 最 优 解 的 偏离 程度 不 一 定 可 以 事先 预计 ; 
另 一 种 是 ， 启 发 式 算法 是 一 种 技术 ， 这 种 技术 使 得 在 可 接受 的 计算 成 本 内 去 搜寻 
最 好 的 解 ， 但 不 一 定 能 保证 所 得 的 是 可 行 解 和 最 优 解 ， 甚 至 在 多 数 情况 下 ， 无 法 
阐述 所 得 解 同 最 优 解 的 近似 程度 。 本 文 较 倾向 儿 同 第 二 种 定义 ， 因 为 启发 式 算法 
现在 还 没有 完备 的 理论 体系 ， 只 能 视 作 一 种 技术 。 由 于 启发 式 算法 的 计算 量 都 比 
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较 大 ， 所 以 伴随 着 计算 机 技术 的 发 展 ， 启 发 式 算法 取得 了 巨大 的 成 就 。 

20 世纪 40 年 代 : 由 于 实际 需要 ， 人 们 已 经 提出 了 一 些 解决 实际 问题 的 快速 
有 效 的 启发 式 算法 。 

20 世纪 50 年 代 : 启发 式 算法 的 研究 逐步 繁荣 起 来 。 随 后 ， 人 们 把 启发 式 算 
法 的 思想 和 人 工 智能 领域 中 的 各 种 有 关 问 题 的 求解 的 收缩 方法 结合 起 来 ， 提 出 了 
许多 启发 式 的 搜索 算法 。 其 中 贪 禁 算 法 和 局 部 搜索 算法 等 受到 人 们 的 关注 。 

20 世纪 60 年 代 : 随 着 人 们 对 数学 模型 和 优化 算法 的 研究 越 来 越 重 视 ， 发 现 
以 前 提出 的 启发 式 算法 速度 很 快 ， 但 是 解 的 质量 不 能 保证 。 虽 然 对 优化 算法 的 研 
究 取得 了 很 大 的 进展 ， 但 是 对 较 大 规模 的 问题 仍然 无 能 为 力 〈 计 算 量 还 是 太 
大 ) 。 

20 世纪 70 年 代 : 计算 复杂 性 理论 的 提出 。NP 完全 理论 告诉 我 们 ， 许 多 实 
际 问题 不 可 能 在 合理 的 时 间 范 围 内 找到 全 局 最 优 解 。 贪 禁 算 法 和 局 部 搜索 算法 速 
度 快 ， 但 解 不 好 的 原因 主要 是 它们 只 是 在 局 部 区 域内 找 解 ， 得 到 的 解 不 能 保证 全 
局 最 优 。 因 此 必须 引入 新 的 搜索 机 制 和 策略 ， 才 能 有 效 地 解决 这 些 困 难 问题 ， 这 
就 导致 了 超 启发 式 算法 (Meta-heuristic Algorithms) 的 产生 。Holland 模拟 地 球 上 
生物 进化 规律 提出 了 遗传 算法 〈Genetic Algorithm) ， 它 与 众 不 同 的 搜索 机 制 再 次 
引发 了 人 们 研究 启发 式 算法 的 兴趣 ， 从 而 掀起 了 研究 启发 式 算法 的 热潮 。 

20 世纪 80 年 代 以 后 : 模拟 退火 算法 〈(Simulated Annealing Algorithm) 、 人 工 
神经 网 络 〈 Artificial Neural Network ) 、 禁 忌 搜 索 (Tabu Search) 相继 出 现 。 最 
近 ， 演 化 算法 〈Evolutionary Algorithm) 、 蚁 群 算法 〈Ant Algorithms) 、 拟 人 拟 物 
算法 、 量 子 算法 等 又 相继 兴起 ， 掀 起 了 研究 启发 式 算法 的 高 潮 。 由 于 这 些 算 法 简 
单 和 有 效 ， 而 且 具 有 某 种 智能 ， 因 而 成 为 科学 计算 和 人 类 实践 之 间 的 桥梁 。 

优胜 劣 汰 是 大 自然 的 普遍 规律 ， 主 要 通过 选择 和 变异 来 实现 。 选 择 是 优化 的 
基本 思想 ， 变 异 (多 样 化 ) 是 随机 搜索 或 非 确定 搜索 的 基本 思想 。 “优胜 沙 汰 ” 
是 算法 搜索 的 核心 ， 根 据 “优胜 劣 汰 ”策略 的 不 同 ， 可 以 获得 不 同 的 超 启发 式 
算法 。 超 启发 式 算法 的 主要 思想 来 自 于 人 类 经 过 长 期 对 物理 、 生 物 、 社 会 等 自然 
现象 仔细 的 观察 和 实践 ， 以 及 对 这 些 自然 现象 的 深刻 理解 ， 逐 步 向 大 自然 学 习 ， 
模仿 其 中 的 自然 现象 的 运行 机 制 而 得 到 的 。 

(1) 遗传 算法 : 是 根据 生物 演化 ， 模 拟 演化 过 程 中 基因 染色 体 的 选择 、 交 
又 和 变异 得 到 的 算法 。 在 进化 过 程 中 ， 较 好 的 个 体 有 较 大 的 生存 几率 。. 

(2) 模拟 退火 : 模拟 统计 物理 中 固体 物质 的 结晶 过 程 。 在 退火 过 程 中 ， 如 
果 搜 索 到 好 的 解 就 接受 ; 否则 ， 以 一 定 的 概率 接受 不 好 的 解 〈 即 实现 多 样 化 或 
变异 的 思想 ) ， 达 到 跳出 局 部 最 优 解 的 目的 。 

(3) 神经 网 络 : 模拟 大 脑 神经 处 理事 务 ， 通 过 各 个 神经 元 的 竞争 和 协作 ， 
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实现 选择 和 变异 的 过 程 。 

(4) 禁忌 搜索 ; 模拟 人 的 经 验 ， 通 过 禁忌 表 记 忆 最 近 搜索 过 程 中 的 历史 信 
息 ， 禁 忌 某 些 解 ， 以 避免 走 回头 路 ， 达 到 跳出 局 部 最 优 解 的 目的 。 

(5) 蚂蚁 算法 : 模拟 蚂蚁 的 行为 ， 向 蚂蚁 的 协作 方式 学 习 。 

以 上 拖 种 超 启发 式 算法 都 有 一 个 共同 的 特点 :从 随机 的 可 行 初始 解 出 发 。 采 
用 和 迭代 改进 的 策略 去 逼近 问题 的 最 优 解 。 

它们 的 基本 要 素 包括 : 

(1) 随机 初始 可 行 解 。 

(2) 给 定 一 个 评价 函数 〈 主 要 与 目标 函数 值 有 关 ) 。 

(3) 产生 新 的 可 行 解 。 

(4) 选择 和 接受 解 的 准则 。 

(5) 终止 准则 。 

其 中 (4) 集中 反映 了 超 启 发 式 算法 的 克服 局 部 最 优 的 能 力 。 

虽然 人 们 对 启发 式 算法 的 研究 了 将 近 50 年 ， 但 它 还 有 很 多 方面 的 研究 存在 
不 足 ， 如 : 

(1) 启发 式 算法 目前 缺乏 统一 、 完 整 的 理论 体系 。 

(2) 由 于 NP 理论 ， 各 种 启发 式 算法 都 不 可 避免 地 唱 遇 到 局 部 最 优 的 问题 ， 
即 如何 判 断 最 优 性 。 

(3) 启发 式 算法 都 有 各 自 优 点 ， 但 缺乏 关于 各 算法 完美 结合 的 研究 。 

(4) 启发 式 算法 中 的 参数 对 算法 的 效果 和 着 至 关 重 要 的 作用 ， 关于 有 效 设 
置 参数 方面 缺乏 深入 研究 。 

(5) 启发 式 算法 缺乏 有 效 的 迭代 停止 条 件 。 

(6) 关于 启发 式 算法 收敛 速度 的 研究 尚 不 充分 。 


2.4 “全 局 最 优 与 计算 复杂 性 


全 局 最 优化 的 问题 很 早 就 有 人 提出 来 了 。Markowzi，Manne (1957) 和 Da- 
ntzig 《1958) 讨论 了 线性 混合 整数 规划 问题 的 全 局 最 优 解 〈 线 性 优化 问题 没有 全 
局 最 优 和 局 部 最 优 的 区 别 ， 因 为 线性 规划 是 凸 规划 ， 它 的 可 行 域 上 的 局 部 最 优 就 
是 全 局 最 优 ) ， 之 后 又 有 LAND 和 DOIG 等 研究 了 全 局 最 优化 问题 。 全 局 最 优化 
成 为 数学 规划 的 一 个 重要 分 支 的 时 间 是 19 世纪 70 年 代 后 期 (“Towards Global 
Optimization”，dixon，Szego，1975) 。 为 了 解决 这 个 问题 ， 许 多 学 者 开始 研究 它 ， 
并 提出 了 丰富 的 理论 和 算法 成 果 ， 但 是 人 们 发 现 似乎 是 没有 好 的 算法 能 有 效 地 胡 
决 全 局 最 优化 问题 。 
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起 初 人 们 用 经 典 算法 (如 最 速 下 降 法 、 牛 顿 法 、SQP 等 ) 进行 多 初始 点 的 
计算 ， 但 不 能 有 效 地 解决 全 局 最 优化 问题 。 与 此 同时 , 计算 复杂 性 理论 (19 世 
纪 70 年 代 ) 创立 了 。 自 从 Cook1972 年 提出 NP 理论 后 ， 衡 量 计算 复杂 性 有 了 标 
准 ， 人 们 进而 证 明了 全 局 最 优化 问题 是 NP 问题 。 经 典 算法 求解 全 局 最 优化 问题 
的 效果 不 是 很 好 ， 随 后 有 的 人 开始 根据 全 局 优化 问题 的 特点 对 经 典 算法 进行 了 改 
进 ， 有 的 则 引 和 人 了 启发 式 算法 〈 如 遗传 算法 、 神 经 网 络 、 模 拟 退 火 等 ) ， 大 都 采 
用 随机 搜索 的 策略 。 完 美的 东西 似乎 是 不 存在 的 ， 如 果 得 到 精确 的 解 ， 计 算 时 间 
总 是 难以 承受 。 计 算 时 间 的 减少 和 计算 结果 质量 的 提高 是 不 能 同时 做 到 的 ， 如 果 
想 提高 计算 结果 的 质量 就 要 多 花 时 间 ， 如 果 想 要 快速 计算 ， 计 算 结果 的 最 优 性 就 
无 法 保证 。 

有 时 各 种 算法 对 同一 个 问题 都 有 可 能 给 出 最 优 解 ， 为 了 判定 各 种 算法 的 效 
率 ， 人 们 给 出 了 算法 复杂 性 的 度量 ， 以 及 几 个 多 项 式 和 指数 的 时 间 复 杂 性 函数 的 
对 比 表 ， 如 表 2-1 所 示 。 计 算 复 杂 性 理论 是 研究 算法 有 效 性 和 问题 难度 的 一 种 工 
具 ， 它 是 最 优化 问题 的 基础 ， 涉 及 如 何 判断 一 个 问题 的 难 易 程 度 。 只 有 了 解 了 所 
研究 问题 的 复杂 性 ， 才 能 更 有 针对 性 地 设计 相关 算法 ， 以 及 提高 算法 效率 。 

所 谓 了 问题 ， 就 是 可 以 在 关于 问题 本 身 参 数 (如 维 数 、 约 束 个 数 等 ) 的 多 
项 式 时 间 内 求解 的 问题 。 


甫 2-1 几 个 多 项 式 和 指数 的 时 间 复 杂 性 函数 的 对 比 


本 二 
Te am Ta 

注 ， 表 中 ，s; 秒 ; m: 分 ! d: 天 ; 7: 年 ; el 世纪 。 

NP 问题 就 是 对 于 一 个 给 定 的 点 ， 能 在 多 项 式 时 间 内 判定 它 是 否 给 定 问题 的 
解 的 问题 。NP 包含 P 是 显然 的 事实 。 但 是 了 是否 也 包含 NP， 就 是 一 个 非常 困难 
的 问题 。 目 前 ， 这 个 问题 被 列 为 世界 7 大 数学 难题 之 首 。 有 一 类 NP 问题 ， 它 们 
之 间 相 互 等 价 ， 求 解 其 中 一 个 问题 就 求解 了 全 部 问题 ， 大 部 分 组 合 优化 问题 属于 
此 类 。 这 类 问题 称 为 NP 完全 问题 类 ， 单 个 问题 就 称 为 NP 完全 问题 。 共 识 性 的 
看 法 认为 ， 这 类 问题 不 存在 多 项 式 时 间 算 法 。 
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2.5 计算 误差 理论 


在 数值 计算 过 程 中 ， 往 往 会 出 现 各 种 各 样 的 误差 ， 它 们 会 直接 影响 到 计算 的 
结果 ， 这 些 误差 也 会 在 计算 过 程 中 产生 各 种 各 样 的 效益 。 例 如 ， 某 个 参数 由 于 观 
测 引 起 的 误差 是 微不足道 的 ， 或 者 少量 的 伟人 误差 对 中 介 计 算 的 结果 影响 不 是 很 
大 ,但 是 ， 这 些 误 差 经 过 计算 机 的 千 万 次 运算 以 后 ， 误 差 的 积累 可 能 大 得 惊人 。 
初始 数据 的 微小 误差 也 可 能 会 引起 严重 错误 ， 甚 至 会 导致 完全 错误 的 结果 。 因 
此 ， 挑 选 和 设计 好 的 算法 ， 是 一 个 很 重要 的 环节 ， 必 须 加 以 足够 的 重视 。 


2.5.1 误差 产生 的 原因 和 形式 


误 关 在 数值 计算 中 是 不 可 避免 的 。 误 差 主 要 有 截断 误差 (方法 误差 ) 和 会 
人 误差 两 种 。 

1. 帘 断 误差 

算法 的 实现 是 从 连续 系统 到 离散 系统 的 一 个 转变 过 程 。 许 多 数学 运算 〈 如 
微分 、 积 分 与 无 穷 级 数 求 和 等 ) 是 通过 极限 过 程 来 定义 的 ， 而 实际 上 计算 机 只 
能 完成 有 限 次 的 算术 与 逻辑 运算 。 因 此 ， 在 实际 计算 过 程 中 ， 还 需 将 解 题 方案 加 
工 成 算术 运算 和 符号 运算 的 有 限 序列 ， 而 这 种 加 工 往往 又 表现 为 某 无 限 过 程 的 一 
个 “截断 ”。 例 如 ， 对 于 收敛 的 无 穷 级 数 ， 常 用 它 前 面 的 有 限 项 的 和 代替 无 穷 级 
数 的 和 ， 实 际 上 抛弃 了 无 穷 级 数 的 后 段 ， 由 此 便 产 生 了 误差 。 

2. 舍 入 误差 

当 计 算 机 执行 算法 时 ， 由 于 受 计 算 机 的 有 效 数 字 位 数 的 限制 ， 参 加 运算 的 数 
据 总 是 只 能 具有 有 限 位 的 有 效 数字 ， 因 而 也 就 产生 了 含 人 误差 。 

在 数值 计算 过 程 中 ,， 由 于 计算 机 〈 别 的 计算 工具 也 是 如 此 ) 只 能 对 数据 的 
有 限 位 数 进 行 运算 ， 因 而 在 运算 过 程 中 不 可 避免 地 会 产生 误差 。 但 是 ， 如 果 能 够 
掌握 误差 产生 的 规律 ， 就 可 以 将 误差 限制 在 最 小 的 范围 之 内 。 而 实际 上 ， 在 运算 
过 程 中 所 产生 的 误差 的 大 小 ， 通 常 又 与 运算 步骤 有 关 。 例 如 ， 在 计算 机 上 进行 算 
术 运 算 时 ，c + +c 可 能 不 等 于 e+c+b， 同 样 (aa+b < 也 可 能 不 等 于 ac + pc。 


2.5.2 误差 处 理 的 几 种 方法 


如 上 所 述 ， 计 算 同 样 的 问题 ， 不 同 的 顺序 、 不 同 的 计算 形式 所 产生 的 误差 大 
小 是 不 一 样 的 ， 所 以 在 可 能 会 出 现 较 大 误差 的 地 方 ， 我 们 可 以 通过 各 种 手段 尽量 
地 减少 误差 程度 。 分 析 运 算 误 差 时 ， 要 考虑 的 原则 如 下 : 

(1) 两 个 相近 的 数 相 减 ， 会 严重 丢失 有 效 字 。 
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假设 y=% 一 4 
其 中 x 和 4 均 为 精确 值 。 为 了 简单 起 见 ， 假 设 4 在 运算 时 不 产生 误差 ， 而 x 有 误 


差 ， 其 近似 值 为 x"。 
、 _(x -4) 一 (xz 一 4) 和 一 和 ”五 (x) 
时 人 

由 上 式 可 以 看 出 ， 当 。 的 绝对 误差 不 变 时 ，x "与 4 越 接近 ， 则 y 的 相对 误差 
的 绝对 值 就 越 大 。 

两 个 相近 的 数 相 减 ， 会 产生 极 大 的 误差 ， 但 我 们 可 以 改变 公式 的 形式 ， 以 减 
少 误差 。 常 用 的 公式 变换 方法 如 下 : 

1) 当 x, 很 接近 ”> 时 

lgx' -lgxz =]1g(xiVx2 ) 








2) 当 x 接 近 0 时 
1 -cosx SlimnxX 
sinx 1 +cosx 
3) 当 x 充分 大 时 
1 
arctan(X +1) -- arctan(%) = Err 
= < + 


两 个 相近 的 〈 比 较 复杂 ) 函数 值 相 减 的 时 候 ， 可 用 Taylor 展开 计算 。 
(2) 除数 绝对 值 较 小 时 ， 商 的 绝对 值 会 增 大 。 
假设 


区 
z = 一 


其 中 x 和 y 的 近似 值 分 别 为 *" 和 7”， 则 


和 革 世 如 7 "和 ”一 和 和 十 和 YY” 
7” 条 ” 
_Y(x-x% ) -5 (Y-7 ) _Y 忆 (x) 一 % 玖 (7Y) 
和” 《7 
由 上 面 的 式 子 可 以 看 出 ， 当 两 个 数 相 除 时 ， 分 母 〈 即 除数 ) 的 绝对 值 越 小 ， 
商 的 绝对 值 就 越 大 。 


〈2-5) 
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(3) 在 运算 过 程 中 必须 注意 合理 安排 运算 顺序 ， 以 便 提高 运算 精度 或 保护 
重要 的 参数 。 

在 制定 一 个 计算 步骤 时 ， 还 必须 注意 某 些 重要 参数 是 否 被 “ 吃 掉 ” 的 问题 。 
例如 : 

110000. 00 - 100000. 00 -~ 10000. 001 = 10000. 000 -~ 10000. 001 = -0.001 

假设 在 一 个 只 有 8 位 有 效 数 字 的 计算 机 上 计算 ， 则 

110000. 00 - 10000. 001 - 100000. 00 = 100000. 00 (1) -100000.00 =0 

由 此 可 以 看 出 ， 在 作 运算 时 ， 应 事先 分 析 一 下 参与 运算 的 各 数值 的 数量 级 ， 
然后 合理 安排 它们 的 运算 顺序 ， 这 样 ， 一 些 重要 的 参数 就 不 至 于 在 运算 过 程 中 被 
其 他 参数 “ 吃 掉 "。 特 别 是 在 作 连 加 运算 时 ， 合 理 安排 它们 的 运算 顺序 ， 可 以 得 
到 精度 较 高 的 结果 。 

(4) 注意 计算 步 又 的 简化 ， 减 少 算术 运算 的 次 数 。 

如 前 所 述 ， 运 算 过 程 中 的 每 一 步 都 有 可 能 产生 误差 ， 而 且 这 些 误 差 还 有 可 能 
传 到 下 一 步 去 ， 这 种 传递 有 时 是 增 大 的 ， 有 时 是 减 小 的 。 同 时 ， 运 算 过 程 中 的 每 
一 步 误 差 ， 也 会 积累 到 最 终 的 结果 中 去 ， 只 不 过 这 种 误差 的 积累 有 时 是 增加 的 ， 
有 时 则 因 互 相抵 消 而 减 小 。 总 而 言 之 ， 在 运算 过 程 中 都 有 可 能 引起 导致 误差 增 大 
的 误差 传播 或 误差 积累 等 问题 。 因 此 ， 减 少 运 算 次 数 ， 就 减少 了 产生 误差 的 机 
会 ， 也 使 误差 积累 有 可 能 减 小 。 


2.5.3 病态 函数 的 判别 


设 有 郴 数 
y= 几 7#) ,asx 三 万 
如 果 在 计算 函数 值 f(x*) 时 ,用 x 的 近似 值 x "来 代替 ， 那 么 函数 F(x) 就 被 
(x” ) 所 代替 ， 其 绝对 误差 为 
尼 LKx)] = 成 xz) - 厌 x”) 

通常 ， 我 们 总 是 希望 当 x "很 接近 x 时 ,FLx”) 也 能 很 好 地 接近 . 几 x) ， 这 时 
三 LAKx)] 会 很 小 。 但 是 ， 实 际 情况 可 能 不 是 这 样 。 对 于 某 些 x" ,，(x") 也 能 
很 好 地 接近 大 x) ， 而 对 于 另外 一 些 *" 则 不 能 ， 这 样 的 否 数 我 们 称 为 病态 函数 。 
这 主要 取决 于 Xx) 的 特性 。 例 如 分 段 函数 、 一 些 分 数 形式 的 函数 中 ， 就 存在 这 
样 的 情形 。 


2.5.4 算法 的 稳定 性 


在 实际 计算 中 ， 参 与 运算 的 各 种 数 一 般 都 带 有 一 定 的 误差 ， 这 个 误差 或 者 是 
初 值 本 身 就 有 的 〈 例 如 截断 误差 ) ， 或 者 是 由 于 受 计算 机 有 效 数 字 位 数 的 限制 所 
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造成 的 伟人 误差 。 这 些 初始 数据 的 误差 〈 也 称 为 摄 动 ) 以 及 在 运算 过 程 中 产生 
的 误差 即使 很 小 ， 但 随 着 计算 过 程 的 进行 ， 这 些 误差 也 会 不 断 地 传播 下 去 ， 对 以 
后 的 结果 产生 一 定 的 影响 。 所 谓 稳定 性 问题 ， 是 指 误差 的 传播 (或 积累 ) 是 否 
受 控制 的 问题 。 如 果 计 算 结果 对 初始 数据 的 误差 以 及 计算 过 程 中 的 伟人 误差 不 敏 
感 ， 则 可 认为 相应 的 算法 是 稳定 的 ， 否 则 就 称 之 为 不 稳定 的 。 
例如 ，xo =a+e， 其 中 e 为 误差 ， 且 e <o(a) ， 如 果 和 迭代 过 程 为 ; 
， Xo =G + 忆 
xx = 和 2 ，P=1，2，… 

在 这 样 的 迭代 过 程 中 ， 误 差 = 对 结果 的 影响 是 一 个 逐渐 增 大 的 过 程 。 如 果 和 迭代 过 
程 为 ; 


xo=4+Bs>0 


和 二 Ai 有 =TI，2，…。 
在 这 样 的 迭代 过 程 中 ， 误 差 = 对 结果 的 影响 是 一 个 逐渐 缩小 的 过 程 。 


第 3 章 MATLAB 基本 介绍 


对 于 计算 机 语言 ， 只 有 正确 合理 地 输入 编译 器 才能 正确 执行 函数 ， 并 输出 我 
们 想 要 的 结果 ，MATLAB 也 不 例外 。 本 章 主要 对 MATLAB 的 背景 以 及 基本 使 用 
方法 作 简 单 介绍 ， 以 便 能 正确 地 使 用 MATLAB 进行 运筹 学 与 最 优化 问题 的 求解 。 


3.1 MATLAB 的 发 展 历程 和 影响 


MATLAB 由 MATrix 和 LABoratory 两 词 的 前 三 个 字母 组 合 而 成 。 那 是 20 世纪 
70 年 代 后 期 的 事情 : 时 任 美国 新 墨西哥 大 学 计算 机 科学 系 主任 的 Cleve Moler 教 
授 出 于 减轻 学 生 编 程 负担 的 动机 ， 为 学 生 设 计 了 一 组 调用 LINPACK 和 EISPACK 
库 程 序 的 “通俗 易 用 ”的 接口 ， 此 即 用 FORTRAN 语言 编写 的 萌芽 状态 的 MAT- 
LAB。 经 过 几 年 的 校 际 流传 ， 在 Little 的 推动 下 ， 由 Litte、Moler、Steve Bangert 
合作 ， 于 1984 年 成 立 了 MathWorks 公司 ， 并 把 MATLAB 正式 推 向 市 场 。 从 那 时 
起 ，MATLAB 的 内 核 采 用 C 语言 编写 ， 而 且 除 原 有 的 数值 计算 能 力 外 ， 还 新 增 
了 数据 图 视 功 能 。MATLAB 以 商品 形式 出 现 后 的 短 短 几 年 ， 就 以 其 良好 的 开放 
性 和 运行 的 可 靠 性 ， 使 原先 控制 领域 里 的 封闭 式 软件 包 纷 纷 淘汰 ， 而 改 在 MAT- 
LAB 平台 上 重建 。 到 了 20 世纪 90 年 代 ，MATLAB 已 经 成 为 国际 控制 界 公 认 的 标 
准 计算 软件 。90 年 代 初 期 ， 在 国际 上 30 几 个 数学 类 科技 应 用 软件 中 ，MATLAB 
在 数值 计算 方面 独占 整 头 ， 而 Mathematica 和 Maple 则 分 居 符 号 计算 软件 的 前 两 
名 。Mathead 因 其 提供 计算 、 图 形 、 文 字 处 理 的 统一 环境 而 深 受 中 学 生 欢迎 。 

MathWorks 公司 于 1993 年 推出 了 基于 Windows 平台 的 MATLAB4.0。4. x 版 
在 继承 和 发 展 其 原 有 的 数值 计算 和 图 形 可 视 能 力 的 同时 ， 出 现 了 以 下 几 个 重要 变 
化 : 四 推出 了 SIMULINK 个 交互 式 操 作 的 动态 系统 建 模 、 人 仿真、 分 析 集 成 
环境 。@ 推 出 了 符号 计算 工具 包 一 一 一 个 以 Maple 为 “引擎 ”的 Symbolic Math 
Toolbox 1.0。 此 举 结 束 了 国际 上 数值 计算 、 符 号 计算 熟 优 熟 劣 的 长 期 争论 ， 促 成 
了 两 种 计算 的 互补 发 展 新 时 代 。 图 构 作 了 Notebook 。MathWorks 公司 瞄准 应 用 范 
围 最 广 的 Word， 运 用 DDE 和 OLE， 实 现 了 MATLAB 与 Word 的 无 锋 连 接 ， 从 而 
为 专业 科技 工作 者 借 造 了 融合 科学 计算 、 图 形 可 视 、 文 字 处 理 于 一 体 的 高 水 准 环 
境 。 从 1997 年 春 的 5.0 版 起 ， 后 历经 $.1、5.2、5.3、6.0、6. 1 等 多 个 版 本 的 
不 断 改进 ，MATLAB “面向 对 象 ”的 特点 愈加 突出 ， 数 据 类 型 愈加 丰富 ， 操 作 界 
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面 愈加 友善 。2002 年 初夏 推出 的 6. 5 版 的 最 大 特点 是 : 采用 了 JIT 加 速 器 ， 从 而 
使 MATLAB 朝 着 运算 速度 与 C 程序 相 比 肩 的 方向 前 进 了 一 大 步 。 从 2006 年 开 
始 ，MathWorks 公司 宣布 每 年 更 新 两 次 版 本 ， 已 经 有 了 MATLAB2006a，MAT- 
LAB2006b，MATLAB2007a，MATLAB2007b ，…，MATAB2009a 等 。 

本 书 中 的 所 有 程序 都 经 MATLAB2008a 测试 计算 。 


3.2 MATLAB 界面 介绍 


MATLAB 界面 如 图 3-1 所 示 。 
Enter MATLAB functions at 由 ec Command Window prompt. 


Folder 
M- 人 le 


4/1i6/04 10:00 Ag --*+ 到 
lc 汪汪 
Drmat 10n9 e At 
Q /IEI1eSsA Se Ce | 





The Command History maintains a Tecord of 
the MATLAB fbnctions You Tan. 


3-i 


一 般 情 况 下 MATLAB 的 初始 界面 主要 由 以 下 四 部 分 组 成 : 

(1) Command Window (命令 行 界 面 ) : 包含 主要 的 数值 计算 、 函 数 参 数 设 
定 、 函 数 调用 及 其 结果 输出 。 

(2) Command History (历史 命令 界面 ) : 存储 Command Window 曾 输入 的 历 
史 命 令 。 

(3) Current Directory (当前 工作 目录 ) : 显示 当前 工作 目录 下 的 文件 。 
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(4) Workspace (工作 空间 ) : 包含 现实 与 计算 相关 的 变量 名 称 及 其 数值 。 


3.3 MATLAB 操作 介绍 


MATLAB 语法 与 函数 众多 ， 这 里 只 介绍 一 些 基 本 操作 ， 其 他 具体 函数 可 以 参 
看 MATLAB 的 帮助 (help) 。help 使 用 方法 是 在 Command window 输 人 heip + 画 
数 名 称 。 
例如 输入 : help rand 
结果 输出 : 
RAND “Uniformly distributed pseudo-random numbers. 
R = RAND(N) retums an N-by-N matrix containing pseudo-random values 
drawn from a uiniform distribution on the unit interval， RAND(M,N) 
or RAND([M,N] ) returmms an M-by-N matrx  RANDU(M,N,P,…) or 
RAND([M,N,P,…]) retums an M-by-N-by-P-by-… aray. RAND with 
no _ arguments retura 8a scalar， RAND(SIZE(A) ) retums an array the 


same size 85 从 . 


For a fll description of the Mersenne Twister algorithm ，see 
http ://www. math. sci. hiroshima-u. ac. jpy ~ m-mat/MTemt html. 
本 书 不 对 具体 的 MATLAB 基本 语法 进行 介绍 ， 以 下 只 对 MATLAB 的 常用 知 
识 点 进行 提示 性 介绍 : 
1. MATLAB 常用 到 的 永久 变量 
(1) ans: 计算 结果 的 默认 变量 名 。 
(2) ij: 基本 虚数 单位 。 
(3) eps: 系统 的 浮 点 精度 。 
>> eps 
2.2204e -016 (系统 计算 的 精度 ) 
(4) inf; 无 限 大 ， 例 1/0。 
《5) nan 或 NaN: 非 数 值 。 
(6) Pi: 圆周 率 mr。 
〈7) realmax: 系统 所 能 表示 的 最 大 数值 。 
>> realmax 
1. 7977e +308 
(8) realmin: 系统 所 能 表示 的 最 小 数值 。 
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>> realmin 
2. 22$le -- 308 

(9) nargin: 函数 的 输入 参数 个 数 。 

(10) nargout: 本 数 的 输出 参数 个 数 。 

(11) MATLAB 的 所 有 运算 都 定义 在 复数 域 上 。 对 于 方 根 运算 只 返回 处 于 第 
一 象限 的 解 。 

(12) MATLAB 分 别 用 左 斜 “/” 和 右 氏 “\ ”来 表示 “ 左 除 ” 和 “ 右 除 ” 
运算 。 对 于 标量 运算 而 言 ， 这 两 者 的 作用 没有 区 别 : 但 对 于 矩阵 运算 来 说 ， 二 者 
将 产生 不 同 的 结果 。 ae 

2. 多 项 式 的 表示 方法 和 运算 

p(x) =x3 -3x+5 可 以 表示 为 p=[1 0 -3 5], 求 x=5 时 的 值 用 polyval 
(p,5) 。 

也 可 以 求 向 量 :a=[3 4 5] ,polyval (p,a) 

>> p=[10 -35] 

表示 三 次 项 系数 为 1, 二 次 项 系数 为 0, 一 次 项 系数 为 -3, 常 数 项 为 5, 具 体 可 
以 参看 MATLAB 的 Help 文档 。 

>> xX=5S，polyval (Pp,x) 

115 
>> a=[345]，polyval (p,ay) . 
23 57 115 (计算 a 中 每 个 元 素 对 应 多 项 式 的 值 ) 

函数 roots 求 多 项 式 的 根 roots(p) 

>>p=[10 -35]; 

>>Tr=roots(P) 

-2. 2790 《多 项 式 的 三 个 根 ) 
1. 1395 + 0. 9463i 
1. 1395 - 0. 9463i 

有 时 roots(p) 会 产生 虚 根 ,这 时 用 real 函数 可 抽取 实 根 
>> real(r) 和 

angs 三 

--2. 2790 
1. 1395 
1. 1395 
函数 conv(a,b) 为 多 项 式 乘 法 (执行 两 个 数组 的 卷 积 ) 
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>>a=[1234]; 

>>b=[14916]; 

>>e=conv(a,b) 

1 6 20 50 75 84 64 

( 即 多 项 式 为 :x6 +6x'5 +20x4 +50x“3 +7Sx2 +84x +64) 

多 项 式 的 加 减法 , 低 阶 的 多 项 式 必 须 用 首 零 填 补 , 使 其 与 高 阶 多 项 式 有 同样 的 
阶 次 。 

多 项 式 除 法 [q , r] = deconv(c , b) 表示 byec,d 为 商 多 项 式 ,r 为 余数 。 

多 项 式 的 导数 polyder(f) 

>>f=[245621]; 

>>s=polyder(f) 

s = 

10 16 15 12 吕 

3， 多 项 式 的 曲线 拟 合 

x=[12345]; 

y= [5.6 40 150 250 498.9] ; 

p = polyfit(x,y,n) 数据 的 n 次 多 项 式 拟 合 poly: 和 矩阵 的 特征 多 项 式 、 根 集 对 应 
的 多 项 式 , n 取 1 时 , 即 为 最 小 二 乘法 (线性 回归 方程 ) 。 

>> xXx=[12345]; 

>>y= [5.6 40 150 250 498.9 ] ; 

>>p=polyfit(x,y,1) 

P =119. 6600 -170.0800 【第 一 个 数值 为 一 次 项 系数 , 另 一 个 为 常数 项 ) 

分 析 拟 合 结果 : 

>>X2 =1:0.1:5; 

>> 吕 = polyval(p,z2) ; 计算 多 项 式 的 值 (polyvalm 计算 矩阵 多 项 式 ) 

>>plot(x,y,， * ”2,72); plot 画 函 数 曲 线 ,如 图 3-2 所 示 。 

三 次 函数 拟 合 示例 : 

>> x=[12345]; 

>> y= [5.6 40 150 250 498.9]; 

>> p=polyfit(x,y,3) 

p=6.1083 -25.0464 84.2452 -63.2000 

分 析 拟 合 结果 

>> 闻 =1:0.1:5; 
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>> 岂 =polyval(p,x2); 
>> Plot(x,y， 让 ”7X2,72); 
结果 如 图 3-3 所 示 。 


500 


400 





MATLAB 提供 了 曲线 拟 合 工具 CFTO0OL, 含 有 更 多 的 拟 合 模型 ,具体 可 以 参看 
该 函数 说 明 。 

4. 多 项 式 插值 

一 维 插值 函数 YI = interp1(x,y,XI, "method' ) 

其 中 ,XI 为 插值 点 的 自 变 量 坐标 向 量 , 可 以 为 数组 或 单个 数 。 
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method 为 选择 插值 算法 的 方法 ,包括 :linear( 线 性 插值 ) .cubic (立方 插值 ) 、 
spline( 三 次 样 条 插值 ) .nearst( 最 近邻 插值 ) 等 。 
例如 ,人 口 预 测 : 
esSr 三 1900 :10 :2000 ; 
number = [78 91 105 …. 每 10 年 的 人 口 数 ]; 
天 三 1900 ;1 ;2000 ; 
y=interpl(year,number,x，"spline" ) ; 最 后 一 个 参数 表示 使 用 的 插值 方法 
函数 interpl( 一 维 播 值 函 数 ) 提供 的 不 同 插值 方法 如 下 : 
nearest” 一 最 近邻 插值 
"linear′ -线性 插值 
"spline” -分 段 3 次 样 条 插值 (SPLINE ) 
" pchip， -分 段 3 次 厄 米 多 项 式 捅 值 
例如 ,Nearest( 最 近邻 插值 法 ) : 
最 近邻 插值 法 ( Nearest Neighbor) 又 称 泰 森 多 边 形 方法 。 泰 森 多 边 形 (Thies- 
en, 又 叫 Dirichlet 或 Voronoi 多 边 形 ) 分 析 法 是 荷兰 气象 学 家 A. H. Thiessen 提出 的 
一 种 分 析 方 法 ,最 初 用 于 通过 离散 分 布 气象 站 的 降雨 量 数据 计算 平均 降雨 量 ,现在 
GIS 和 地 理 分 析 中 经 常 采 用 泰 森 多 边 形 进行 快速 的 赋值 。 实 际 上 ,最 近邻 插值 法 
一 个 隐 含 的 假设 条 件 是 , 任 一 网 格 点 P(x,y) 的 属性 值 都 使 用 距 它 最 近 的 位 置 点 的 
属性 值 ,用 每 一 个 网 格 节点 的 最 邻 点 值 作为 待 选 的 节点 值 。 当 数据 已 经 是 均匀 间 
隔 分 布 时 ,要 上 先 将 数据 转换 为 SURFER 的 网 格 文件 ,可 以 应 用 最 近邻 插值 法 ;或 者 
在 一 个 文件 中 ,数据 紧密 完整 ,只 有 少数 点 没有 取 值 ,可 用 最 近邻 插值 法 来 填充 无 
值 的 数据 点 。 有 时 需要 排除 网 格 文件 中 的 无 值 数据 的 区 域 ,给 搜索 查 圆 ( Search- 
Ellipse) 设 置 一 个 值 , 对 无 数据 区 域 赋予 该 网 格 文件 里 的 空白 值 。 设 置 的 搜索 半径 
的 大 小 要 小 于 该 网 格 文件 数据 值 之 间 的 距 离 , 所 有 的 无 数据 网 格 节点 都 被 厂 予 空 
白 值 。 在 使 用 最 近邻 插值 网 格 化 法 ,将 一 个 规则 间隔 的 XYZ 数据 转换 为 一 个 网 格 
文件 时 ,可 设置 网 格 间隔 和 XYZ 数据 的 数据 点 之 间 的 间距 相等 。 最 近邻 插值 网 格 
化 法 没有 选项 , 它 是 均 质 是 无 变化 的 ,对 均匀 间隔 的 数据 进行 插值 很 有 用 ,同时 , 它 
对 填充 无 值 数据 的 区 域 很 有 效 。 
在 应 用 中 , 常 遇 到 一 维 傅 里 叶 变换 插值 。 一 维 傅 里 叶 变 换 插值 使 用 函数 inter- 
pft 实现 ,计算 含有 周期 函数 值 的 矢量 的 傅 里 叶 变 换 , 然后 使 用 更 多 的 点 进行 傅 里 
叶 变 换 的 逆 变 换 。 郴 数 的 使 用 格式 如 下 : 
y=interpft(x,n) 
其 中 ,x 是 含有 周期 函数 值 的 矢量 ,并 为 等 距 的 点 ,n 为 返 同等 间距 点 的 个 
数 。 
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示例 ; 
>>y=[0.511.521.51.50 -.5 -1 -1.5 -2 -1.5 -1 -.50]; 
N = length(y); 
>> =5; 
M=NyrLi 
= 0:L:L*rN-1i 
xi = 0:M-1i 
7i = interpft(y,M) ; 
plot(x,y，"o" ai,7i，* "); 
legend( ' Original data' ," Interpolated data' ) ;如 图 3-4 所 示 。 
~ 本 





5. 求解 一 元 函数 的 最 小 什 
最 优化 为 本 书 重点 介绍 部 分 ,以 下 仅仅 是 简单 示例 : 

测试 函数 humps 为 MATLAB 一 内 置 函数 。 

HUMPS  A function used by QUADDEMO ，ZERODEMO and FPLOTDEMO. 


humps = [S. 1765 9. 1046 ”15.4706 ”26.4290 ”45. 8868 ”76. 1622 
96. 5000 ”76.9197 “47.4483 ”28.8929 “ 19.0000 ”13.9469 ”11. 6923 
11.3033 ”12.3824 ”14.7059 ”17.8462 ”20.7294 ”21.7027 “19.8416 


16. 0000 ] 
HUMPS 是 一 个 20 次 函数 ,其 曲线 图 像 如 图 3-5 所 示 。 
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y=fminbnd( "humps" ,0.3,1) 

求解 "humps "函数 在 [0. 3,1] 上 的 最 小 值 对 应 的 变量 值 。 

y =0.6370 

函数 fminserch 用 于 求 多 元 函数 的 最 小 值 。 它 可 以 指定 一 个 开始 的 矢量 ,并 非 


指定 一 个 区 间 。 此 函数 返 回 一 个 矢量 为 此 多 元 函数 局 部 最 小 函数 值 对 应 的 自 变 


莉 。 


6 纹理 成 图 功能 

由 warp 孙 数 的 纹理 成 图 功能 实现 平面 图 像 在 空间 三 维 曲 面 上 的 显示 。 

将 文件 名 为 Bowers. tif 的 图 像 分 别 投影 到 图 柱 形 和 球形 表面 上 。 

i = imread( "flowers. tif” ) ; 

[x,y,z] = cylinder; 

subplot(1,2,1) ,warp(x,y,z,i); 

[x,y,z] =sphere(50) ; 

subplot(1 ,2 ,2) ,warp(x,y,z,i); 

warp(X,y，,Zyi) 3 

注释 :flowers. tif 需要 自 定 义 图 片 。 

7. 求 画 数 的 零点 

>> polyfl = [ 0.3049 “0.4084 -0.2681 -0.2607 -0.4502]; 
定义 一 个 多 项 式 。 

>> [X,FVAL,EXITFLAG] =fzero(@(x)bolyval(polyfl ,xz) ,[1,2]); 
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求 函 数 polyfl 在 [1,2] 区 间 上 的 零 值 点 。 
X = 1.1303 (0 值 点 对 应 的 变量 值 ) 
FVAL = 1.1102e-016 (0 值 点 对 应 的 函数 值 ) 
EXITFLAG = 1 (程序 结束 标记 ) 
也 可 以 给 一 个 初始 值 , 计 算 以 该 初始 值 为 初始 迭代 点 ,得 到 本 数 值 为 零 的 变量 
值 及 实际 函数 值 。 
>> [X,FVAL,EXITFLAG] = fzero(@ (x) ,polyval( polyployfl ,x) ,0.9) ; 
X = 1.1303 (0 值 点 对 应 的 变量 值 ) 
FVAL = 1.1102e -016 (0 值 点 对 应 的 函数 值 ) 
EXITFLAG = 1 (程序 结束 标记 ) 
对 于 多 项 式 可 直接 由 roots 求 其 根 。 
>> roots( polyfl ) 
ans = 
-1.8124 
1. 1303 
-0. 3287 +0.7828i 
-0.3287 -0.7828i 
8， 函 数 定 积 分 
计算 Kx) = 和 -2x -5 在 [0,2] 上 的 积分 可 以 使 用 quad。 
>> 了 =@(x)l/(x 233-2*x-5); 
>>Q = quad(F,;0,2) 
Q = -0.4605 
对 于 二 重 积分 ,首先 计算 内 积分 ,然后 借助 内 积分 的 中 间 结 果 再 求 出 二 重 积分 
的 值 , 类 似 于 积分 中 的 分 步 积分 法 。 


例如 ,计算 忆 = |[ (ysinz + xcosy)dzdy。 
>>F = @(x,y)y*ysin(x) +X# cos( 了 ); 
>>Q = dblquad(F,pi,2* pi,0,pi) ; 
Q = -9.8696 
符号 积分 运算 int( 有) 
最 精确 的 是 符号 积分 法 。 例 如 ,计算 。 = 三 [ xydzdy 。 


>> syms x y% 中 间 为 空格 ,不 能 为 逗号 
>>s=int(int( "xy 了 ，x" ,0,1)，7" ,1,2)% 引 号 可 省 略 
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sS=3/4 
9 微分 运算 (diff) 
微分 是 描述 一 个 函数 在 一 点 处 的 斜率 ， 是 本 数 的 微观 性 质 ， 因 此 积分 对 函数 
的 形状 在 小 范围 内 的 改变 不 敏感 ， 而 微分 很 敏感 。 一 个 函数 的 小 的 变化 ， 容 易 产 
生 相 邻 点 的 斜率 的 大 的 改变 。 由 于 微分 这 个 固有 的 困难 ， 所 以 要 尽 可 能 避免 数值 
微分 ， 特 别 是 对 实验 获得 的 数据 进行 微分 。 在 这 种 情况 下 ， 最 好 用 最 小 二 乘 曲线 
拟 合 这 种 数据 ， 然 后 对 所 得 到 的 多 项 式 进 行 微 分 ; 或 用 另 一 种 方法 对 点 数据 进行 
三 次 样 条 拟 合 ， 然 后 寻找 样 条 微分 。 但 是 ， 有 时 微分 运算 是 不 可 避免 的 ， 在 
MATLAB 中 ， 可 用 西数 diff 计算 一 个 矢量 或 者 矩阵 的 微分 (也 可 以 理解 为 盖 
分 ) 。 
>>a=[12333789]; 
>>b = diff(a) 狗 一 次 微分 
b= 1 1 0 0 二 1 1 
>>bb = dif(a,2)% 二 次 微分 
bb =0 一 1 0 4 -3 0 
实际 上 dif(a) = [a(2) -~a(1),a(3) -a(2),…;,a(n) -a(n-1l)] 
对 于 求 矩 阵 的 微分 , 即 为 求 各 列 矢量 的 微分 ,从 矢量 的 微分 值 可 以 判断 矢量 的 
单调 性 是否 等 间距 以 及 是 否 有 重复 的 元 素 。 
符号 微分 运算 (diff) ,有 下 列 形 式 : 设 f =cos(a*x)， 
df =dif(f) 和 由 findsym 的 规则 , 隐 含 指定 对 x 进行 微分 ， 
dta = dif(f，a")% 指 定 对 变量 a 进行 微分 ， 
dfa = dif(f，a"” ,3)% 指 定 对 变量 a 进行 三 次 微分 。 
dif 函数 不 仅 作用 在 标量 上 ,还 可 以 在 矩阵 上 ,运算 规则 就 是 按 和 矩阵 的 元 素 分 
别 进行 微分 。 
10. 计算 多 元 函数 的 梯度 
王 数 多 = gradient(f) ,f 是 一 个 矢量 返回 f 的 一 维 数值 梯度 ,人 f 对 应 于 x 方向 的 
微分 。 
例如 : 
[x,y] = meshgrid( -2:.2:2, -2:.2:2) ; 
2=X. 本 exp( -xy MD)i 
[px,py] = gradient(z,.2,.2); 
contour( z) ,hold on;% 画 等 值 线 。 
quiver(px,P7) % 如 图 36 所 示 。 
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11， MATLAB 字符 事 运 算 

利用 sym 命令 创建 表达 式 。 

f=sym('“cos(x) +sin(x)") 或 syms x ,f=cos(x) +sin(x) 

dif(f) 求 其 导数 

(也 可 直接 用 命令 f= dif( "cos(x) +cos(7) ) 

当 字符 表达 式 中 含有 多 于 一 个 的 变量 时 ,只 有 一 个 变量 是 独立 变量 。 如 果 不 
告诉 MATLAB 哪 一 个 变量 是 独立 变量 , 则 可 以 通过 findsym 命令 询问 。 

利用 findsym 命令 查询 独立 变量 : 

f=sym( "sin(a*x) +b”) 

findsym(f,1) 给 出 独立 变量 (一 个 变量 ,如 果 为 2 则 给 出 2 个 变量 ) 

findsym 人 (f) 给 出 所 有 变量 

符号 表达 式 的 化 简 和 替换 : 

collect 函数 : collect(f,v) 表 示 将 夺 表 示 为 关于 符号 变量 v 的 多 项 式 形式 , 即 
关于 v 合并 同类 项 ;v 缺 省 , 则 用 findsym 确定 的 缺 省 变量 

8S7mS X 了 

f=x2 和 y+y 了 站 X 一 X2 一 2 水 X+1 

collect(f) 得 到 ( -1+y) *x2+(y-2) *x+l 

collect(f,y) 得 到 (x+x2) *y+1 一 X2 一 2 站 X 
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expand 函数 : expand( 介 将 f 展 开 , 写 成 和 的 形式 

5yInS X 

expand((x -1)“3) 得 到 x3 -3*x2+3yx1 

horner 函数 :; ”homer(f) 将 上 写成 镶 峰 套 形式 

SyImS X 

homer(x“3 -6* x2) 得 到 ( -6+x) * x2 

factor 函数 :; factor( 下 将 f 转 换 成 低 阶 有 理 多 项 式 的 乘积 

Syms XX 

f=x3-6*rx2+11*x-6 

factor(f) 得 到 (xz-1)*(x-2)*(x-3) 

simplify(f) 本 数 : 综合 化 简 

simple(f) 函数 的 最 简 形 式 

syms X 

f=2*sin(x2) +cos(3 站 xX) 

simple(f) 如 果 不 想 看 到 中 间 过 程 ,可 用 z = simple(f) 有 时 使 用 两 次 simple 命 
令 可 以 得 到 最 简 式 。 

如 果 想 知道 哪个 简化 命令 得 到 最 后 结果 ,可 以 加 一 个 参数 how ,例如 : 

[z,how] =simple(f》 

符号 表达 式 的 替换 : 

subs(f,new,old) 表示 用 new 蔡 换 函数 f 中 的 变量 old ,例如 : 

f= ?ay#x2+bxyX+c" 

subs(f, tx" ) 得 到 a*(t) 22 +b*(t) +cysubs 是 一 个 符号 画 数 ,返回 一 
个 符号 变量 

subexpr 天 数 ,有 时 MATLAB 返回 的 符号 表达 式 难 以 理解 ,用 subexpr 西数 可 
以 将 表达 式 中 重复 出 现 的 子 式 用 一 个 符号 (一 般 标示 为 sigma) 表示 ,从 而 简化 表 
达 形 式 , 例 如 : 

c=sym( "c" ，real ) ; 

x=sym( "x'  ，real ) ; 

s=solve(x3 -x+c); 

a=subexpr(s) 得 到 sigma = -108*c+12*( -12+81*c2)" (12) 

有 三 

[ 176 * sigma*(17X3 ) +2/sigma"(173 ) ] 

[ -1《12 * sigma"(1/3) - 1/sigma^(1/3) + 1/2 iik3*(1X2) (16 * sigma” 
(1/X3) -2vsigma"(1X3) ) ] 
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[ -lv12 * sigma*(1/3) -~ 1MXsigma"(1/3) -1IM2 *iy3*(1/2) (176 * sigma” 
(1X3) -2/sigma"(1/3) ) ] 
12， 线 性 方程 组 的 求解 
求解 线性 方程 组 ,用 反 斜 枉 \。ax =b -> x=a\b (b 左 除 a) ,例如 
>>a=hilb(3) 
2 
1. 0000 0. 5000 0. 3333 
0. 5000 0. 3333 0. 2500 
0. 3333 0. 2500 0. 2000 
>>b=[123]， 
>>x=a\b 
27. 0000 
-192. 0000 
210. 0000 
13， 和 姑 阵 的 特征 值 和 特征 向 量 
用 eig(v,d) 函 数 ,[v,d] =eig(A); 其 中 d 将 返回 特征 值 , 返回 相应 的 特征 
向 量 , 缺 省 第 二 个 参数 将 只 返回 特征 值 。 例 如 : 
syms 8 b c real ， 
A=[abc;ibcaicab]; 
[vd] =eig(A); 
为 了 观察 更 清楚 ,使 用 以 前 学 过 的 替换 函数 ,这 里 不 用 默认 的 sigma ,而 改 用 
m, 显 式 的 代替 繁琐 的 表达 子 式 。 
vY =subexpr(v) ; 
vs =subs(vv，m' ，asigma” ) 运行 结果 为 
[ 1, 1, 1] 
[ -(c+(m) -a)/(c-b)，-(c-(m) -a)/(c-b)，1] 
[ -(a-(m)-b)/(c-b)，-(a+(m) -b)/(c-b),，1] 
再 用 m 替换 d 中 的 表达 子 式 ; 
dd = subexpr(d); 
ds =subs(dd，xm"” ，sigma"”) 
运行 结果 为 ds = 
[ (m), 0, 0] 
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[0，-(m),0] 

[0,0,c+a+bj 

note 求 特征 值 也 可 用 以 下 命令 : 

f= poly(A) poly 本 数 用 来 求 A 的 特征 多 项 式 

d=asolve(f) solve(f) 函 数 用 来 求 多 项 式 的 解 

syd( ) 函数 求 矩阵 的 奇异 值 分 解 ,将 矩阵 分 解 为 两 个 正 交 和 矩阵 和 对 角 和 矩阵 的 
乘积 

a=symf(hilb(2) ) 

[Fu,s,v] =svd(a) 

14， 代 教 方程 和 方程 组 

代数 方程 的 求解 可 用 solve(f) 命 令 , 如 果 f 不 含 = ,MATLAB 将 给 表达 式 置 零 。 
方程 的 未 知 量 在 默认 的 情况 下 由 findsym 决定 或 显 式 指出 。 

syms &b cxX 

solve(akx2+b*x+c) 以 x 为 默认 变量 

solve(ayx2 +b*x+c,a) 指定 a 为 变量 

求 含 有 等 号 的 方程 的 解 (一 定 要 加 单 引号 ) : 

f= solve(“cos(x) =sin(x)”) 

x=solve( exp(x) =tan(x)”) 如 果 不 能 求 得 符号 解 ， 机 度 角 。 

求解 方程 组 与 单方 程 类 似 。 例 如 , 解 一 个 三 元 一 次 方程 

v=asolve( "ayu2+Y2'，u-v-l'，,a2-5+*ra+6') 

结果 为 v = 

a: [4xl sym] u: [4xl sym] v: [4xl sym] 

15. 一 些 常用 的 符号 运算 

极限 运算 limit; 

limit(f) 求 x 到 0 的 极限 

limit(f,x,a) 或 limit(f,a) 求 x 到 a 的 极限 

limit(f,a，lef” ) limit(f,a，right" ) 求 x 到 a 的 左 极 限 和 右 极 限 

limit(f,inf) 求 x 趋 于 无 穷 的 极限 

符号 求 和 symsum(s) : 

symsum(s) 以 默认 的 indsym 决定 的 变量 求 和 

symsum( syY) 以 s 中 指定 的 变量 v 求 和 

symsum(s,a,b) symsum(s,v,ab) 从 a 到 b 的 有 限 项 求 和 

syms k mn 

syrmaum(k) 从 0 到 k 求 和 
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symsum(k,0,n -1) 从 0 到 nm-1l 求 和 

symsum( lvk2 ,1,inf) 无 限 项 求 和 

16. 素 勒 级 教 taylor( 引 ) 

taylor(f) 表 示 求 了 的 5 阶 talor 展开 ,可 以 增加 参数 指定 展开 的 阶 数 (默认 是 
5) ,也 可 以 对 于 多 元 函数 指定 展开 的 变量 ,还 可 以 指定 在 哪个 点 展开 。 

SyIms X t 

taylor(exp( -x) ) 

taylor(log(x) ,6,1) 在 1 点 的 6 阶 taylor 展开 

taylor(x't,3,t) 对 t+ 的 3 阶 taylor 展开 

17. 积分 变换 

fourier 变换 和 道 变换 fourier(f) : 

fourier 分 析 可 以 将 信号 转换 为 不 同 频率 的 正 艾 曲线 ; 可 对 离散 数据 进行 分 析 ， 
也 可 对 连续 时 间 系 统 进行 分 析 , 特 别 在 信号 和 图 形 处 理 领域 。 尚 散 变换 (DFT) 作 
用 于 有 限 数据 的 采集 ,最 有 效 的 是 快速 fourier 变换 (FFT) 。 

F =fourier(f) 独立 变量 x, 返 回 关于 参数 w 的 函数 

F =fourier(f,v) 返回 函数 了 关于 符号 对 象 v 的 函数 

F =fourier(f,u,v) 对 关于 u 的 函数 进行 变换 ,而 不 是 缺 省 的 w, 返 回 函 数 了 
是 关于 v 的 函数 

syms t V W X 

fourier( 1/t) 

fourier(exp( -+t) * sym( "Heaviside(t)”) ,v) 

fourier( dif(sym("F(x) ) ) ,xyw) 

Fourier 逆 变 换 : 

f=ifourier( 了 ) 缺 省 独立 变量 w, 返 回 关 于 x 的 函数 对 w 进行 积分 

f = ifourier( 了 ,v) 返回 函数 f 是 关于 符号 对 象 v 的 函数 ,而 不 是 缺 省 的 x 

f=ifourier(F,u,y) 是 对 关于 u 的 函数 f 进 行 变 换 ,而 不 是 缺 省 的 x, 返 回 函 数 f 
是 关于 v 的 函数 

Laplace 变换 和 逆 变 换 laplace(f) : 

应 用 于 连续 系统 (微分 方程 ) 中 ,可 以 用 来 求解 微分 方程 的 初 值 问 题 

laplace(F) 缺 省 独立 变量 t, 缺 省 返回 关于 s 的 画 数 世 

]aplace(F,t) 返回 关于 t 的 丕 数 工 ,而 不 是 缺 省 的 s 

laplace(F,w,z) 对 函数 下 的 自 变 量 w 积分 ,返回 关于 z 的 函数 工 

道 变换 : 

F = ilaplace(L) 缺 省 独立 变量 s, 返 回 关于 t 的 函数 了 
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F=ilaplace(L,y) 返回 关于 y 的 函数 ,而 不 是 缺 省 的 t 

F =ilaplace(L,y,x) 对 函数 工 的 自 变量 y 积分 ,返回 关于 x 的 函数 了 

Z - 变换 和 首 变 换 ztrans(f) 标量 符号 ff 的 Z- 变换 ; 

F = ztrans(f) 缺 省 独立 变量 n, 返 回 关 于 z 的 函数 

F = ztrans(f,w) 返回 关于 符号 变量 w 的 函 数 F, 而 不 是 缺 省 的 z 

F = ztrans(f,k,w) 关于 k 的 符号 变量 作 Z - 变换 ， 返回 关于 符号 变量 w 的 函 


道 变换 iztrangs( 上 了) : 

f= iztrans( 下 ) 或 (了 ,ko) 或 (下 ,w,k) 

18. 符号 绘图 函数 

符号 郴 数 简易 绘图 郴 数 ezplot(1) ; 

f 可 以 包含 单个 符号 变量 x 的 字符 串 或 表达 式 ,默认 画图 区 间 ( -2pi,2pi) ,如 
果 上 包含 x 和 y, 画 出 的 图 像 是 fx,y) =0 的 图 像 , 缺 省 区 间 是 -2pi <x<2pi, -2pi 
<y<2pi。 那 么 , 本 数 的 意义 为 ,Ezplot(f,xmin,xmax) 或 ezplot(f,[xmin,xmax] ) 绘 
制 在 xmin <x< xmax 区 间 上 的 图 像 。 

syms Xt 

ezplot( "t*# cos(t)" ,tsin(t)",[0,4*pi]) 

绘制 符号 图 像 函 数 iplot(fun ,lims,tol，"jlinespec " ,n) ,其 中 lims = [xmin ,xmax] 
或 [xmin,xmax ,ymin,ymax ] ;tol 为 指定 相对 误差 ,默认 0. 001; "linespec "为 指定 绘 
图 的 线 型 ;n 为 指定 最 少 以 n+ 1 个 点 绘图 。 例 如 

[x,7] =fplot(fon,lims,…) 只 返回 用 来 绘图 的 点 ,并 不 绘图 ,可 以 自己 调用 
plot(x,y) 来 绘制 图 形 。 

symas X 

subplot(2 ,2 ,1) ,fplot( "humps” ,[0,1]) 

f= "abs(exp(x*#(0:9) ) * ones(10,1))” 

subplot(2.2,2) ,fplot(f,[0,2 * pi]) 

subplot(2,2,3) ,fplot( "sin(1./x) " ,[0.01,0.1],le-3) 

plot 在 (x,y) 坐 标 下 绘制 二 维 图 像 ,支持 多 个 x -y 二 元 结构 

plot3 在 (x,y,z) 坐 标 下 绘制 三 维 图 形 

loglog 在 (x,y) 对 数 坐标 下 绘制 二 维 图 形 

semilogx 在 x 为 对 数 坐标 、y 为 线性 坐标 的 二 维 坐标 中 绘图 

semilogy 在 x 为 线性 坐标 、y 为 对 数 坐 标的 二 维 坐标 中 绘图 

plotyy 在 有 两 个 y 轴 的 坐标 下 绘图 
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plot 的 用 法 : 

plot(x,y, "一品 " ,， "linewidth" ,2， "markeredgecolor”，k” ，… 

"markerfacecolor” ，“g ”markersize”,10) 

plotyy 的 用 法 : 

plotyy(xl,y1,x2 ,72) 以 xl 为 标准 , 左 轴 为 7 轴 绘 制 y1 向 量 ;以 双 为 基准 , 右 
轴 为 了 轴 , 绘 制 2 向 量 

plotyy(xl ,yl1,x2,y2,fun) 用 字符 串 fun 指定 的 绘图 函数 (plot ,semilogx， 
semilogy ,loglog ,stem) 

plotyy((xl,yl1,x2 ,7y2,funl ,fun2) 

t=0:pi20:2 * pi; 

y=exp(sin(t) ); 

plotyy(t,y,t7，plot”"，stem " ) % stem 为 二 维 杆 图 

[ax,hl ,h2] =plotyy(…) 返回 左右 两 轴 的 句柄 (分 别 为 ax(1) ,ax(2) ) ,以 
及 在 两 坐标 轴 中 生成 的 图 形 对 象 的 句柄 ,分别 为 hl ,h2 

t=0:900; 

A =1000; 

a=0.005 ; 

b =0. 005 ; 

z2 =cos(b*t); 

zl =Ax*exp( 一 a 站 t); 

[ haxes ,hlinel ,hline2 ] = plotyy(t,zl,t,z2，semilogy”，Pplot” ) ; 

axes{ haxes(1) ) 

ylabel( "semilog plot” ) 对 数 坐 标 

axes( haxes(2) ) 

ylabel("linear plot ” ) 

set( hline2 ，jlinestyle" ， 一 ”) 

其 他 二 维 图 形 绘图 指令 : 

bar(x,y) 二 维 条 形 图 

hist(y,n) 直方 图 

histfit(y,n) 带 拟 合 线 的 直方 图 ,n 为 直方 的 个 数 

stem(x,y) 火柴 杆 图 

comet(x,y) 趋 星 状 轨迹 图 

compass(x,y) 罗盘 图 

errorbar(x,y,1,u) 误差 限 图 
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feather(x,y) 羽毛 状 图 

fill(x,y， Fr" ) 二 维 填充 函数 ,以 红色 填充 

pie(x) 人 饼 图 

polar(t,r) 极 坐 标 图 ,r 为 幅 值 向 量 ,t 为 角度 向 量 

t=0:0.1;8 * pi; 

T=cos(3*t2) +172; 

polar(t,r) ,xlabel( "polar 指令 ” ) 

quiver(x,7) 磁力 线 图 

stairs(x,7) 阶梯 图 

loglog(x,7) 对 数 图 

semilogx semilogy 半 对 数 图 

MATLAB 三 维 作 图 

plot3(x,y,z) 三 维 线条 图 

t=0:pi/50:15 * pii 

plot3(sin(t) ,cos(t) ,t，r* "”) 与 plot 相似 

text(0,0,0，origin" ) 在 某 个 坐标 点 加 人 文字 

plot3 增加 维 数 可 以 一 次 画 多 个 图 ,使 所 有 二 维 图 形 沿 一 个 轴 排 列 。 

19. 三 维 网 线 图 的 绘制 

mesh(x,y,2) 网 格 图 

mesh(x,y,z,c) 四 维 作 图 ,(x,y,z) 代 表 空 间 三 维 ,c 代表 颜色 维 

mesh(… ， property name” ,property value,…) 设置 曲面 各 属性 的 值 

[x,y,z] =sphere(12) ; 

mesh(x,y,z) ,hidden off 曲面 设置 为 透明 

meshc(x,y,z) 画 网 格 图 和 基本 的 等 值 线 图 

meshz(x,y,z) 画 包含 零 平 面 的 网 格 图 

waterfall(x,y,z) 与 mesh 一 样 , 只 是 在 效果 上 它 的 网 格 线 只 在 x 轴 一 个 方向 出 
现 , 呈 瀑布 状 水 线 

两 个 变量 的 标量 指令 meshgrid(x) 或 meshgrid(x,y) 将 两 个 一 维 向 量 生成 两 个 
二 维 向 量 ,以便 进行 z=f(x,y) 运 算 , 算 出 z 的 所 有 值 ,z 为 x,y 的 标量 指令 

[X,Y] = meshgrid(x) ,meshgrid(x,x) 的 简略 式 

[X,Y] = meshgrid(x,y) 

[X,Y,Z] = meshgrid(x,y,z) ,用 于 三 维 图 形 的 绘制 

[x,y] =meshgrid([ -2:0.1:2]); 
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z=X. #exp( -xx 72-y7 22); 
plot3(x,y,z) 
surf(x,y,z,c) 着 色 表 面 图 
surf(x,y,z) 隐 含 着 c =z 
surf(z) 隐 含 着 x,y 的 值 为 surf 指令 根据 z 的 尺寸 自动 生成 
surfc 画 出 具有 基本 等 值 线 的 曲面 图 
sumdl 画 出 一 个 具有 亮度 的 曲面 图 
shading fat 网 线 图 的 某 整 条 线段 或 曲面 图 的 某 个 贴 片 都 着 一 种 颜色 
shading interp 某 一 线段 或 贴 片上 各 点 的 颜色 由 线 或 片 的 顶端 颜色 经 线性 插值 而 
曲面 图 不 能 设 成 网 格 图 那样 透明 ,但 需要 时 ,可 以 在 孔洞 处 将 数据 设 成 mm。 
20. 等 高 线 的 绘制 
在 二 维 空间 绘制 等 高 线 contour 
contour(x,y,z,n) 绘制 n 条 等 值 线 (n 可 省 咯 ) 
contour(x,y,z,v) 在 向 量 v 所 指定 的 高 度 上 绘制 等 高 线 (可 省 ) 
c = contour(x,y,z) 计算 等 值 线 的 高 度 值 
c= contourc(x,y,z,n) 计算 n 条 等 高 线 的 x -7y 坐标 数据 
c = contourc(x,y,z,v) 计算 向 量 v 所 指定 的 等 高 线 的 x -y 坐标 数据 
clabel(c) 给 。 阵 所 表示 的 等 高 线 加 注 高 度 标 识 
clabel(c,v) 给 向 量 v 所 指定 的 等 高 线 加 注 高 度 标 识 
clabel(c，manual " ) 借助 鼠标 给 点 中 的 等 高 线 加 注 高 度 标识 
三 维 空间 绘制 等 高 线 contour3(x,y,z) 
[x,y,z] =peaks(30); 
contour3(x,y,z,16，g”) 
21， 二 元 函数 的 伪 彩 图 pcolor(x,7,z) 
它 是 指令 surf 的 二 维 等 效 指令 ,代表 伪 彩 色 , 可 与 contour 单 色 等 值 线 结合 画 
彩色 等 值 线 图 。 
[x,y,z] =peaks(30) 
pcolor(x,y,z) ; 伪 彩 色 
shading interp 颜色 揪 值 ,使 颜色 平均 渐变 
hold on ,contour(x,y,z,20，"k' ).… 画 等 值 线 
colorbar("horiz” ) 水 平 颜色 标尺 
c=contour(x,y,z,8) ; 


clabel(c) 标注 等 高 线 


有 
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22. 失重 场 图 ( 志 度 图 )quiver 
用 于 描述 函数 z=f(x,y) 在 点 (x,y) 的 梯度 大 小 和 方向 
[X,Y] =meshgrid(x,y) X,Y 为 2Z 阵 元 素 的 坐标 和 矩阵 
[U,V] = gradient(Z,dx,dy) U,V 分 别 为 Z 对 x\ 对 y 的 导数 ,dx,dy 是 x,7 方 
向 上 的 计算 步 长 
quiver(X,Y,U,V,s，linespec"，filed" ) U,V 为 必 选 项 ,决定 矢量 场 图 中 各 
矢量 的 大 小 和 方向 ,s 为 指定 所 画 箭 头 的 大 小 ; 缺 省 时 取 1 ,jinespee 为 字符 囊 ,指定 
合法 的 线形 和 彩色 ,filed 用 于 填充 定义 的 绘图 标识 符 。 
[x,y] =meshgrid( -2:.2:2, -1I:.15:1) ; 
z= 基 站 exp( 一 7 2) 
[px,py] = gradient(z,.2,. 15); 
contour(x,y,z) ; 
hold on ,quiver(x,y,pPx,py) ,axis image 
23. 多 边 形 的 填 色 fi(x,y,c) 
c 定义 颜色 字符 桌 ,可 以 是 "r" ，"b 等 ,也 可 以 用 RGB 三 色 表 示 [r,g,bj 值 为 
0 -1 图 形 的 四 维 表 现 。 例 如 ; 
>> xXx=0:0.1:10; 
>> 了 =Ssin(x); 
>> fll([x,10],[y,0],r"”) 
结果 如 图 3-7 所 示 。 
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3.4 M 文件 郴 数 


使 用 MATLAB 函数 时 ， 例 如 inv，abs，angle 和 sqrt，MATLAB 获取 传递 给 它 
的 变量 ， 利 用 所 给 的 输入 ， 计 算 所 要 求 的 结果 ; 然后 ， 把 这 些 结果 返回 。 由 函数 
执行 的 命令 以 及 由 这 些 命令 所 创建 的 中 间 变量 ， 都 是 隐 含 的 。 所 有 可 见 的 东西 是 


输入 和 输出 ， 也 就 是 说 ， 函 数 是 一 个 黑箱 。 


这 些 属性 使 得 函数 成 为 强 有 力 的 工具 ， 用 以 计算 命令 。 这 些 命令 包括 在 求解 
一 些 大 的 问题 时 ， 经 常 出 现 的 有 用 的 数学 函数 或 命令 序列 。 由 于 这 个 强大 的 功 
能 ，MATLAB 提供 了 一 个 创建 用 户 函 数 的 结构 ， 并 以 M 文件 的 文本 形式 存储 在 
计算 机 上 。MATLAB 函数 全 plr 是 一 个 M 文件 函数 良好 的 例子 。 图 3-8 是 M 文件 


窗口 。 












ie 有 CMR 人 
CE ”上田 而 日 如 丘 
区 下 了 民 二 训 W SC 全 
四 定量 YE SA TIW TEST MO CIUNI TIIG 
和 才 fihe lefyriwht 由 recricn. 








和 
Se iso PLIPLD，ROT90， 几 JPDIAL 










} 《CopyriehY 19684-2004 The Mthgorks、 [sc 
| 20:0.1:101 有 车 “各 cwiont 怀 本 3 4 4Date; 3004j07y05 1 和 911 
| 





y=sint: 上 
】 -在 1 ” 
Til1(Do 101s 
ele 
| elear 
位 
0? 


edt 
edit 下 iplr 和 
一 ee 


function y = 年 plr(x) 
% FLIPLR lip matrix in the left/rght direction. 
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和 0 FLIPLR(X) returns X with row preserved and columns flipped 
久 in the left/right direction. 
儿 
9 生 二 了 -2 3 becomes 3 2 1 
忽 4 5 6 6 5 4 
和 0 

9 See also FLIPUD ，ROT90. 

和 Copyright (c) 1984 -94 by The MathWorks ，Inc. 

[m, n] = size(x); 

yy=x:vn:-l:1); 

一 个 函数 M 文件 与 脚本 文件 类 似 之 处 在 于 它们 都 是 一 个 有 . m 扩展 名 的 文本 
文件 。 如 同 脚 本 M 文件 一 样 ， 函 数 M 文件 不 进 人 命令 窗口 ， 而 是 由 文本 编辑 器 
所 创建 的 外 部 文本 文件 。 一 个 天 数 的 M 文件 与 脚本 文件 在 通信 方面 是 不 同 的 。 
函数 与 MATLAB 工作 空间 之 人 间 的 通信 ， 只 通过 传递 给 它 的 变量 和 通过 它 所 创建 
的 输出 变量 。 在 函数 内 ， 中 间 变 量 不 出 现在 MATLAB 工作 空间 ， 或 与 MATLAB 
工作 空间 不 交互 。 正 如 上 面 的 例子 所 看 到 的 ， 一 个 函数 的 M 文件 的 第 一 行 把 M 
文件 定义 为 一 个 函数 ， 并 指定 它 的 名 字 。 它 与 文件 名 相同 ， 但 没有 . m 扩展 名 。 
它 也 定义 了 它 的 输入 和 输出 变量 。 接 下 来 的 注释 行 是 所 展示 的 文本 ， 它 与 帮助 命 
令 : >> help fliplr 相对 应 。 第 一 行 帮助 行 称 为 H1 行 ， 是 由 lookfor 命令 所 搜索 的 
行 。 最 后 ，M 文件 的 其 余部 分 包含 了 MATLAB 创建 输出 变量 的 命令 。 

M 文件 函数 必须 遵循 以 下 特定 的 规则 。 除 此 之 外 ， 它 还 有 许多 重要 属性 ， 
包括 ;: 

(1) 函数 名 和 文件 名 必须 相同 。 例 如 ， 函 数 全 plr 存储 在 名 为 全 plr. m 文件 
中 。 

(2) MATLAB 第 一 次 执行 一 个 M 文件 函数 时 ， 它 打开 相应 的 文本 文件 并 将 
命令 编辑 成 存储 器 的 内 部 表示 ， 以 加 速 执行 以 后 所 有 的 调用 。 如 果 函 数 包含 了 对 
其 他 M 文件 函数 的 引用 ， 它 们 也 同样 被 编译 到 存储 器 里 。 普 通 的 脚本 M 文件 不 
被 编译 ， 即 使 它们 是 从 画 数 M 文件 内 调用 ; 打开 脚本 M 文件 ， 调 用 一 次 就 逐 行 
进行 注释 。 

(3) 在 函数 M 文件 中 ， 到 第 一 个 非 注释 行为 止 的 注释 行 是 帮助 文本 。 当 需 
要 帮助 时 ， 返 回 该 文本 。 例 如 ，>> help fiplr 返回 上 述 前 八 行 注释 。 

(4) 第 一 行 帮助 行 ， 名 为 Hl1 行 ， 是 由 lookfor 命令 搜索 的 行 。 

(5) 函数 可 以 有 零 个 或 更 多 个 输入 参量 。 函 数 可 以 有 零 个 或 更 多 个 输出 参 
量 。 


44 ”运筹 学 与 最 优化 MATLAB 编程 





(6) 函数 可 以 按 少 于 函数 M 文件 中 所 规定 的 输入 和 输出 变量 进行 调用 ， 但 
不 能 用 多 于 函数 M 文件 中 所 规定 的 输入 和 输出 变量 数目 。 如 果 输 入 和 输出 变量 
数目 多 于 函数 M 文件 中 function 语句 一 开始 所 规定 的 数目 ， 则 调用 时 自动 返回 一 
个 错误 。 

(7) 当 函 数 有 一 个 以 上 输出 变量 时 ， 输 出 变量 包含 在 括号 内 。 例 如 ，[V， 

D] = eig (A) 。 不 要 把 这 个 句法 与 等 号 右边 的 [V，D] 相 混淆 ， 右 边 的 [V， 

D] 是 由 数组 V 和 D 所 组 成 。 

(8) 当 调 用 一 个 函数 时 ， 所 用 的 输入 和 输出 参量 的 数目 在 函数 内 是 规定 好 
的 。 函 数 工 作 空 间 变量 nargin 包含 输入 参量 个 数 ; 函数 工作 空间 变量 nargout 包 
含 输出 参量 个 数 。 事 实 上 ， 这 些 变量 常用 来 设置 缺 省 输入 变量 ， 并 决定 用 户 所 和 希 
望 的 输出 变量 。 例 如 ， 考 虑 MATLAB 函数 linspace : 

function y = linspace(dl1，d2,n) 

% LINSPACE Linearly spaced vector， 

LINSPACE(xl ，x2 ) generates a row vector of 100 linearly 
equally spaced points between xl and 了 2， 
LINSPACE(xl ，x2 ，N) generates N points between xl and 了 2. 


See also LOGCSPACE ，:. 
Copyright (c) 1984 -94 by The MathWorks ，Inc. 
这 nargin 一 2 

nmn 三 100; 

end 

y= [dl+(0:n-2)*(d2-dl)vn-1) d2] ; 

这 里 ， 如 果 用 户 只 用 两 个 输入 参量 调用 linspace ， 例 如 linspace(0，10 ) ， 
linspace 产生 100 个 数据 点 。 相 反 ， 如 果 输 人 参量 的 个 数 是 3， 例 如 linspace(0， 
10，50) ， 第 三 个 参量 决定 数据 点 的 个 数 。 

可 用 一 个 或 两 个 输出 参量 调用 的 函数 的 一 个 例子 是 MATLAB 函数 SIZF。 尽 
管 这 个 函数 不 是 一 个 M 文件 函数 ( 它 是 一 个 内 置 函 数 ) ，SIZE 函数 的 帮助 文本 
说 明了 它 的 输出 参量 的 选择 。 

SIZFE ”Matrix dimensions. 

D = SIZE(X) , for M -by -~-N matrix X，returms the two -~ element 
row vector D = [M，N] containing the number of rows and columns 
in the matrix. 

[M, N] = SIZE(X) returns the number of rows and columns 


和 
和 
9% 
和 
和 
迁 
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in separate output variables. 

如 果 函 数 仅 用 一 个 输出 参量 调用 ， 就 返回 一 个 二 元 素 的 行 ， 它 包含 行 数 和 列 
数 ; 相反 ， 如 果 出 现 两 个 输出 参量 ，size 分 别 返 回 行 和 列 。 在 允 文件 函数 里 ， 变 
量 nargout 可 用 来 检验 输出 参量 的 个 数 ， 并 按 要 求 修正 输出 变量 的 创建 。 

(9) 当 一 个 函数 说 明 一 个 或 多 个 输出 变量 ， 但 没有 要 求 输出 时 ， 就 简单 地 
不 给 输出 变量 赋 任 何 值 。MATLAB 本 数 toc 阐明 了 这 个 属性 。 

function t = toc 

% TOC Read the stopwatch timer. 

9 TOC ，by itself ，prints the elapsed time since TIC was used. 

和 t = TOC; sayes the elapsed time in t，instead of printing 让 out. 

久 

% See alsao TIC, ETIME，CLOCK，CPUTIME. 

久 Copyright (ec) 1984 - 94 by The MathWorks ，Inc. 

和 “TOC uses ETIME and the value of CLOCK saved by TIC. 

人 lobal TICTOC 

证 nargout < 1 

elapsed_time = etime(clock ，TICTOC ) 
ejse 
t = etime(clock ，TICTOC ) ; 

end 

如 果 用 户 不 以 输出 参量 调用 toc .， 例 如 ， >> toc， 就 不 指定 输出 变量 t 的 值 ， 
函数 在 命令 窗口 显示 本 数 工作 空间 变量 elapsed _time ， 但 在 MATLAB 工作 空间 
里 不 创建 变量 。 相 反 ， 如 果 toc 是 以 >> out =toc 调用 ， 则 按 变量 out 将 消逝 的 时 
间 返 回 到 命令 窗口 。 : 

(10) 天 数 有 它们 自己 的 专用 工作 空间 ， 与 MATLAB 的 工作 空间 分 开 。 函 数 
内 变量 与 MATLAB 工作 空间 之 间 唯 一 的 联系 是 焉 数 的 输入 和 输出 变量 。 如 果 函 
数 任 一 输入 变量 值 发 生变 化 ， 其 变化 仅 在 画 数 内 出 现 ， 不 影响 MATLAB 工作 空 
间 的 变量 。 函 数 内 所 创建 的 变量 只 驻 留 在 函数 的 工作 空间 ， 而 且 只 在 函数 执行 期 
间 临 时 存在 ， 以 后 就 消失 。 因 此 ， 从 一 个 调用 到 下 一 个 调用 ， 在 本 数 工作 空间 变 
量 存储 信息 是 不 可 能 的 。 然而， 如 下 所 述 ， 使 用 全 局 变量 就 可 以 提供 这 个 特 
征 ) 

(11) 如 果 一 个 预定 的 变量 ， 例 如 pi, 在 MATLAB 工作 空间 重新 定义 ， 它 不 
会 延伸 到 函数 的 工作 空间 。 逆 向 有 同样 的 属性 ， 即 函数 内 的 重新 定义 变量 不 会 延 
伸 到 MATLAB 的 工作 空间 中 。 
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(12) 当 调 用 一 个 函数 时 ， 输 入 变量 不 会 拷贝 到 函数 的 工作 空间 ， 但 使 它们 
的 值 在 函数 内 可 读 。 然 而 ， 改 变 输 入 变量 内 的 任何 值 ， 那 么 数组 就 拷贝 到 函数 工 
作 空 间 。 进 而 ， 按 缺 省 ， 如 果 输 出 变量 与 输入 变量 相同 ， 例 如 ， 函 数 x = fan(x， 
y,，z) 中 的 x ， 那 么 就 将 它 拷贝 到 郴 数 的 工作 空间 。 因 此 ， 为 了 节约 存储 和 增加 
速度 ， 最 好 是 从 大 数组 中 抽取 元 素 ， 然 后 对 它们 作 修 正 ， 而 不 是 使 整个 数组 拷贝 
到 函数 的 工作 空间 。 

(13) 如 果 变 其 说 明 是 全 局 的 ， 画 数 可 以 与 其 他 表 数 、MATLAB 工作 空间 和 
递归 调用 本 身 共享 变量 。 为 了 在 函数 内 或 MATLAB 工作 空间 中 访问 全 局 变量 ， 
在 每 一 个 所 希望 的 工作 空间 ， 变 量 必须 说 明 是 全 局 的 。 全 局 变量 使 用 的 例子 可 以 
在 MATLAB 函数 tic 和 toc 中 看 到 ， 它 们 合 在 一 起 工作 如 一 个 跑 表 。 

function tic 

豫 TIC Start a stopwatch timer， 


入 The sequence of commands 

和 TIC 

和 2 any stu 帮 s 
入 TOC 

入 Prints the time required for the stuff. 

和 

纺 See also TOC ，CLOCK,，ETIME ，CPUTIMF. 

儿 Copyright (c) 1984 -94 by The MathWorks ，Inc. 
和 TIC simply stores CLOCK in a global variable. 

日 obal TICTOC 

TICTOC = clock; 


function t = toc 

% TOC Read 由 e stopwatch timer. 

TOC , by itself，prints the elapsed time since TIC was used. 

t = TOC; saves the elapsed time in t，instead of printing it out 


See lso TIC，ETIME ，CLOCK，CPUTIME. 
Copyright (c) 1984 -94 by The MathWorks ，Inc- 

和 % TOC uses ETIIME and the value of CLOCK saved by TIC.， 
日 obal TICTOC 

让 nargout < .1 

elapsed_time = etime(clock ,TICTOC) 


冰冰 冰冰 冰 
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else 
t = etime(clock ,TICTOC ) ; 

end 

在 函数 tie 中 ， 变 量 TICTOC 说 明 为 全 局 的 ， 因 此 它 的 值 由 调用 天 数 clock 来 
设 定 。 以 后 在 函数 toc 中 ， 变 量 TICTOC 也 说 明 为 全 局 的 ， 让 toe 访问 存储 在 
TICTOC 中 的 值 。 利 用 这 个 值 ，toe 计算 自 执 行 郴 数 tic 以 来 消逝 的 时 间 。 值 得 注 
意 的 是 ,变量 TICTOC 存在 于 tic 和 toc 的 工作 空间 ， 而 不 是 在 MATLAB 工作 空 
间 。 

(14) 实际 编程 中 ， 无 论 什么 时 候 应 应 尽量 只 免 使 用 全 局 变量 。 要 是 用 了 全 局 
变量 ， 建 议 全 局 变量 名 要 长 ， 它 包含 所 有 的 大 写字 母 ， 并 有 选择 地 以 首次 出 现 的 
M 文件 的 名 字 开头 。 如 果 遵 循 建议 ， 则 在 全 局 变量 之 间 不 必要 的 互 作用 将 减 至 
最 小 。 例 如 ， 如 果 另 一 函数 或 MATLAB 工作 空间 说 明 TICTOC 为 全 局 的 ， 那 么 它 
的 值 在 该 函数 或 MATLAB 工作 空间 内 可 被 改变 ， 而 函数 toc 会 得 到 不 同 的、 可 能 
是 无 意义 的 结果 。 

(15) MATLAB 以 搜寻 脚本 文件 的 同样 方式 搜寻 函数 M 文件 。 例 如 ， 输 入 
>> cow ,MATLAB 首先 认为 cow 是 一 个 变量 ; 如 果 它 不 是 ,那么 MATLAB 认为 它 
是 一 个 内 置 函 数 ; 如 果 还 不 是 ，MATLAB 检查 当前 cow. mm 的 目录 或 文件 夹 。 如 
果 它 不 存在 ，MATLAB 就 检查 cow. m 在 MATLAB 搜寻 路 径 上 的 所 有 目录 或 文件 
夹 。 如 需要 更 多 的 信息 ， 请 参阅 本 书 的 2 10 了 MATLAB 用 户 指南 中 “MAT- 
LAB 搜寻 路 径 : 。 

(16) 从 函数 M 文件 内 可 以 调用 脚本 文件 。 在 这 种 情况 下 ， 脚 本 文件 查看 函 
数 工作 空间 ， 不 查看 MATLAB 工作 空间 。 从 函数 .M 文件 内 调用 的 脚本 文件 不 必 
用 调用 函数 编译 到 内 存 。 函 数 每 调用 一 次 ， 它 们 就 被 打开 和 和 解释。 因此， 从 函数 
M 文件 内 调用 脚本 文件 减 慢 了 函数 的 执行 。 

(17) 函数 可 以 递归 调用 ， 即 M 文件 函数 能 调用 它们 本 身 。 例 如 ， 考 虑 下 列 
函数 iforgot: 

fumnction iforgot(n) 

% IFORCOT Recursive Function Call 相 

% Copyright (c) 1996 by Prentice ~ Hall ,Inc 

这 nargin 一 0,n =20;end 

fn>l 

disp(”I will remember to do my homework. “) 
iforgot(n -1) 
else 
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disgp( ”Maybe NOTI“ ) 
end 
调用 这 个 函数 产生 
>> ifiorgot(10) 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
I will remember to do my homework. 
Maybe NOT! 
递归 调用 函数 功能 在 许多 应 用 场合 是 有 用 的 。 在 编制 要 递归 调用 的 函数 时 ， 
必须 确保 会 终止 ， 否 则 MATLAB 会 陷 人 死 循 环 。 最 后 ， 在 一 个 递归 函数 内 ， 如 
果 变 量 说 明 是 全 局 的 ， 则 该 全 局 变量 对 以 后 所 有 函数 调用 是 可 用 的 。 在 这 个 意义 
下 , 全 局 变量 变 成 静态 的 ， 并 在 函数 调用 之 间 不 会 消失 。 

(18) 当 函 数 M 文件 到 达 M 文件 终点 ， 或 者 碰 到 返回 命令 retum， 就 结束 执 
行 和 返回 。return 命令 提供 了 一 种 结束 一 个 函数 的 简单 方法 ， 而 不 必 到 达 文 件 的 
终点 。 

(19) MATLAB 函数 emror 在 命令 窗口 显示 一 个 字符 串 ， 放 弃 函 数 执行 ， 把 控 
制 权 返回 给 键盘 。 这 个 函数 对 提示 函数 使 用 不 当 很 有 用 ， 如 在 以 下 文件 片段 中 : 

这 length (val) >1 

error (”  VAL must be a scalar，“) 

end 

这 里 ， 如 果 变 量 val 不 是 一 个 标量 ，error 显示 消息 字符 串 ， 把 控制 权 返 回 给 
命令 窗口 和 键盘 。 

(20) 当 一 个 函数 的 输入 参量 的 个 数 超出 了 规定 的 范围 ，MATLAB 琐 数 
nargchk 提供 了 统一 的 响应 。 函 数 nargchk 给 定 为 : 

function msg = nargchk(low，high，number) 

9 NARCCHK Check number of input arguments, 

2 Return error message 这 not between low and high. 

9% I it is ，return empty matrix。 


第 3 章 MATLAB 基本 介绍 和 锡 、 





和 Copyright (c) 1984 -94 by The MathWorks ，inc. 

msg =[ jl; 

让 (number < low) 

masg = ”Not enough input arguments。，” ; 
elseif (number > high) 
msg = ”Too many input arguments，”; 

end 

下 列 的 文件 片段 表明 了 在 一 个 文件 函数 内 的 典型 用 法 : 

error( nargchk( nargin ,2, 5) ) 

如 上 所 示 ， 如 果 nargin 的 值 小 于 2， 函 数 emor 像 前 面 描 述 的 那样 进行 处 理 ， 
nargehk 返回 字符 串 “ 没 有 足够 的 输 人 参量 。” 如 果 nargin 的 值 大 于 5， 函 数 emer 
执行 处 理 ，nargchk 返回 字符 串 “ 太 多 输入 参量 " 。 如 果 nargin 是 在 2 和 5 之 间 ， 
函数 eror 简单 地 将 控制 传递 给 下 一 个 语句 ，nargchk 返回 一 个 空 字 符 串 。 也 就 是 
说 ， 当 它 的 输入 参量 为 空 ，error 函数 什么 也 不 做 。 

(21) 当 MATLAB 运行 时 ， 它 缓存 了 (caches) 存储 在 Toolbox 子 目 录 和 

.Toolbox 目录 内 的 所 有 子 目录 中 的 所 有 M 文件 的 名 字 和 位 置 。 这 使 MATLAB 能 很 
快 地 找到 和 执行 函数 M 文件 ， 也 使 得 命令 lookfor 工作 更 快 。 被 缓存 的 X 文件 函 
数 当 作 是 只 读 的 。 如 果 执 行 这 些 函 数 ， 以 后 又 发 生变 化 ，MATLAB 将 只 执行 以 前 
编译 到 内 存 中 的 函数 ， 不 管 已 改变 的 X 文件 。 而 且 ， 在 MATLAB 执行 后 ， 如 果 
M 文件 被 加 到 Toolbox 目录 中 ， 那 么 它们 将 不 出 现在 缓存 里 ， 因 此 不 可 利用 。 所 
以 , 在 M 文 件 函数 的 使 用 中 ， 最 好 把 它们 存储 在 Toolbox 目录 外 ， 或 许 最 好 存储 
在 MATLAB 目录 下 ， 直 至 它们 被 认为 是 完备 的 〈complete) 。 当 它们 被 认为 是 完 
备 的 时 ， 就 将 它们 移 到 一 个 只 读 的 Toolbox 目录 或 文件 夹 的 子 目录 内 。 最 后 ， 要 
确保 MATLAB 搜索 路 径 改 变 ， 以 确认 它们 的 存在 。 

(22) 在 Toolbox 目录 外 ，MATLAB 跟踪 M 文件 的 修改 日 期 。 所 以 ， 当 到 
一 个 以 前 编译 到 内 存 的 M 文件 函数 时 ，MATLAB 把 已 编译 的 M 文件 的 修改 日 期 
与 在 磁盘 上 的 M 文件 比较 。 如 果 日 期 是 相同 的 ，MATLAB 执行 已 编译 的 M 文 件 。 
相反 ， 如 果 在 磁盘 上 的 M 文件 是 新 的 ，MATLAB 清除 以 前 已 编译 的 M 文件 ,， 且 
编译 这 个 新 的 和 修改 过 的 M 文件 。 

(23) M 文件 的 缓存 过 程 因 MATLAB 版 本 的 不 同 而 稍 有 不 同 。 例 如 ，MAT- 
LAB4. 2c 在 Macintosh 机 上 同样 可 以 缓存 当前 的 目录 ， 因 为 这 是 第 一 个 所 搜索 的 
磁盘 位 置 。 这 个 MATLAB 版 本 也 允许 有 选择 地 将 整个 MATLAB 搜索 路 径 缓 存 ， 
并 把 高 速 缓存 信息 存储 在 一 个 文件 中 。 这 样 ， 使 MATLAB 引导 得 更 快 ， 即 寻找 
和 编译 所 有 函数 M 文件 更 快 。 退 出 缓存 ， 不 检测 已 修改 的 或 已 增加 的 M 文件 。 
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当 新 的 M 文件 加 到 一 个 缓存 区 时 ， 只 有 当 高 速 缓存 由 命令 >> path 刷新 时 ， 
MATLAB 才能 找到 它们 ; 当 修 改 缓存 的 M 文件 时 ， 只 有 当 以 前 编译 过 的 版 本 由 
clear 命令 从 内 存 中 清除 ，MATLAB 才 识 别 这 个 变化 。 例 如 ， >> clear myfun， 从 
内 存 中 清除 M 文件 函数 myfun ， 或 >> clear functions, 从 内 存 中 清除 所 有 已 编译 的 
函数 。 

(24) 在 变量 mfilename 函数 内 ， 有 要 执行 的 M 文件 的 名 字 。 例 如 ， 正 在 执 
行 M 文 件 fanetion. m 时 ， 函 数 的 工作 空间 包含 变量 mfilename， 它 包含 函数 字符 . 
串 。 这 个 变量 也 存在 于 脚本 文件 里 ， 在 这 种 情况 下 ， 它 包含 了 要 执行 的 脚本 文件 
的 名 字 。 

(25) M 文件 函数 可 像 MATLAB 命令 一 样 工 作 ， 典 型 的 MATLAB 命令 包括 
clear，disp ，echo， diary ， save,， hold, load ， more 和 format。 通 常 ， 调 用 一 个 函数 把 
参量 放 在 括号 内 ， 例 如 size(A) 。 然 而 ,如 果 函 数 有 字符 串 参 量 ,那么 ,函数 可 按 
通常 函数 进行 调用 ,如 ,disp( "To be or not to be" ) ,或 像 一 个 MATLAB 命令 来 使 
用 ,如 clear functions。 换 句 话说 , 当 要 求 MATLAB 解释 一 个 表达 式 >> command ar- 
gument 时 ,MATLAB 认为 它 如 同 >> command ( "argument ) 一 样 。 事 实 上 , MAT- 
LAB 命令 本 身 能 像 函 数 那样 调用 ,例如 >> format long 和 >> format( "long' ) 二 者 都 
把 数据 变 成 长 格式 。 类 似 地 ，>> format short e 等 价 于 >> format( "short" ，e" ) 。 
正如 最 后 的 例子 所 示 ,空格 (逗号 ,分 号 ) 把 各 个 命令 参量 分 开 。 因 此 , >> disp How 
about this? 产生 一 个 错误 ,因为 命令 disp 只 允许 一 个 输入 参量 ,不 是 三 个 。 如 果 参 
量 包含 在 引号 里 ,那么 MATLAB 就 忽略 空格 ,例如 ,>> disp ”How about this?” 与 
>> disp(" How about this?" ) 等 价 ， 并 产生 所 希望 的 结果 。 

总 之 ， 函 数 M 文件 提供 了 一 个 简单 的 扩展 MATLAB 一 允 (9 广 区 。 事实 上 ， 
MATLAB 本 身 的 许多 标准 函数 就 是 M 文件 本 数 。 


3.5 了 Excel-Link 


MATLAB 提供 使 其 能 与 Excel 互动 操作 的 Excel-link 宏 。Ezxcel-link 使 得 数 
据 在 MATLAB 与 Excel 之 间 随 意 交 换 (如 图 3-9 所 示 ) ， 以 及 在 Excel 下 调用 
MATLAB 的 函数 。Excel-link 将 MATLAB 强大 的 数值 计算 功能 、 数 据 可 视 画 功 
能 与 Excel 的 数据 Sheet 功能 结合 在 一 起 。 下 面 就 简单 介绍 Excel-link 的 基本 操 
作 。 _ 

1. 加 载 Excel-tink 宏 

加 载 方法 : 在 Excel 工具 上 一 加 载 宏一 浏览 (MATLAB 的 安装 路 径 ) 一 tool- 
box 文件 夹 一 exjink 文件 夹 一 excllink. xla 文件 〈 打 开 ) ， 如 图 3-10 所 示 。 
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Microsoft Excel 





再 回 到 加 载 安 界面: 在 Excel link2. 3 for use with MATLAB 选项 上 打 多， 点 击 
确定 ， 如 图 3-11 所 示 。 

如 果 在 Excel 的 左上 方 出 现 startmatlab 、putmatrixz、getmatrix 、evalstring 这 样 
的 Excel-link 则 说 明 加 载 成 功 ， 如 图 3-12 所 示 。 
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2. Excel-link 使 用 方法 
startmatlab ， 点 击 启动 MATLAB。 
Putmatrix: 将 Excel 的 数据 传输 到 MATLAB 中 ， 如 图 3-13 所 示 。 


在 MATLAB 中 ， 可 以 看 到 传人 到 MATLAB 中 的 短 阵 x， 就 计算 y = sin(x) ， 
如 图 3-14 所 示 。 
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图 3-13 


D 太 | 六 网 意 | 入 品目 | 多; ELswaswenvaue 了 


因 jm te ja 因 Thecs om 


0.9218 0. 9355 
0.7382 ”0.9169 
0.1763 “0.4103 
0.4057 ”0.8936 










av 夺 i 让 RS -人 
Sin(x) 有 5 Te na NE 8049 
clec ‖ oazel ooog 04302 0.6730 ”0.7937 
| 可 0.5703 ”0.4408 ”0.5773 ”0.1754 ”0.3989 
-sin(x) 0.4671 0.0185 0.7117 “0.3947 “0.7794 


eg%-- 07-11-10 下 午 6:: | 


图 3-14 
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getmatrix， 将 MATLAB 的 数据 传输 到 Excel 中 。 

点 击 getmatrix ， 输 人 要 传人 的 矩阵 变量 名 称 ， 如 图 3-15 所 示 ; 按 确定 ， 得 
如 图 3-16 所 示 结 果 。 
evalstring: 执行 string 的 MATLAB 命令 ， 具 体 可 以 参看 MATLAB 的 Help。 





it 0 ROLE 


图 3-16 
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4.1 常用 的 算法 搜索 结构 
优化 模型 为 : 


在 最 优化 问题 的 求解 过 程 中 ， 所 用 的 算法 一 般 是 迭代 方法 。 它 的 基本 思想 
是 : 给 定 一 初始 点 x ” e 玉 "， 按 照 某 一 迭代 规则 产生 一 个 点 列 1xz” } ， 使 得 当 
ix | 的 最 后 一 个 点 或 其 极限 点 是 最 优化 问题 的 最 优 解 。 介 绍 算 法 ， 具 体 来 说 主 
要 是 介绍 初始 点 的 选择 〈 有 时 是 任意 的 ) 、 和 迭代 点 的 产生 过 程 以 及 停止 规则 等 。 
本 节 就 算法 的 一 般 概 念 、 性 质 、 构 造 途径 等 作 简 要 介绍 。 


4.11 收敛 性 的 概念 


由 于 选 代 算法 是 以 产生 一 系列 的 迭代 点 为 目的 的 ， 因 此 算法 的 收敛 性 表现 在 
产生 的 点 列 {zx“”“} 上。 

理想 的 收敛 性 概念 一 般 是 指 : 设 x" 为 问题 ( 太 ) 的 E opt， 当 fxz 忆 | 是 有 穷 点 
列 时 ，z "为 1xz”} 的 最 后 一 个 点 ; 当 |x'} 是 无 穷 点 列 时 ，x% zx ，VYK， 但 满 
足 limx'“ =x" ， 则 称 算 法 收敛 到 最 优 解 x” 。 

但 在 实际 运算 中 ， 这 样 的 要 求 很 难 达到 。 因 此 我 们 建立 如 下 实用 的 收敛 性 概 
念 。 

定义 集合 2， 称 之 为 解 集 ， 若 算法 产生 的 点 列 {z“… } 满足 下 列 条 件 之 一 ， 则 
称 算法 收敛 : 

(D jlzolnozx 纪 。 

(2) fx 包 | 的 任意 收敛 子 列 的 极限 点 属于 0。 

解 集 2 一 般 是 指 具 有 某 种 可 接受 性 质 的 点 集 。 例 如 : 

(1) 2=1|xz "1z "为 问题 (人 ) 的 g opt |， 此 即 理想 收敛 。 

(2) 12= 1z ”1z "为 问题 ( 久 ) 的 1 opt }。 

(3) 2= ix" lx "满足 某 种 最 优 性 条 件 } 。 

(4) DR=ir" ixz” es 且 z” )<B1 ， 其 中 局 为 可 接受 的 目标 函数 值 的 上 界 。 
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在 求解 问题 时 ， 初 始点 的 影响 是 否 存在 同 算法 收敛 性 密切 相关 ， 因 此 有 以 下 
概念 : 
(1) 全 局 收 伍 性 。 若 算法 对 任意 初始 点 或 任意 可 行 的 初始 点 都 收敛 ， 则 称 
算法 具有 全 局 收敛 性 。 

(2) 局 部 收敛 性 。 若 算法 只 有 当 限 制 初始 点 在 解 集 纪 附近 (如 非 连通 时 ， 
指 在 QQ 某 点 附近 ) 时 才 收敛 ， 则 称 算法 具有 局 部 收敛 性 。 


4.1.2 收敛 准则 (停止 条 件 ) 


对 应 于 不 同 的 解 集 定义 ， 可 以 规定 相应 的 停机 条 件 。 如 解 集 纪 的 定义 3) 
和 (4) 本 身 就 可 作为 停机 条 件 。 此 外 ， 下 列 几 种 停机 条 件 是 最 常用 的 ， 设 
{z 马 上 为 算法 产生 的 点 列 ，s >0 为 给 定 的 误差 限 〈s 取 值 依 具体 问题 而 定 ) 

(1) jz ”” -zx 1 <s( 一 般 取 普 =1)。 


{A+1) 【 自 ) 

一 9 | 

可 和 戌 erTTTTTE 
| 


| 
(3) IKzeD ) -Kxz)O1<eo 
在 具体 求解 问题 时 ， 应 对 算法 及 问题 进行 必要 的 分 析 ， 从 而 选择 合适 的 停机 
条 件 ; 否则 ， 可 能 出 现 停机 但 没有 得 到 解 的 情况 ， 我 们 称 之 为 早 停 。 


4.13 收敛 速度 
设 {xz'% | 为 算法 产生 的 点 列 ，{xz% 1 收敛 于 zx ， 且 并 天” ，VK 


， | 
tm zz 
若 0<B<1， 则 称 {xzt | 为 线性 收敛 ; 若 B =0， 则 称 fx 岂 | 为 超 线性 收 伍 ; 若 
B=1， 则 称 |xr6 | 为 次 线性 收敛 。 
设 |xz9 } 收敛 于 zx" ， 且 xx zz" ，VK， 若 对 某 个 实数 p 三 1， 有 
让 | zct+D * | * 
ie xz 一 "人 
则 称 {z” | 为 忆 阶 收敛 的 。 
在 优化 问题 的 算法 中 ， 最 常 涉及 的 收 仿 性 有 : 线性 收敛 、 超 线性 收敛、 二 阶 
收敛 。 
定理 4-1 设 点 列 |z 昌 | ,zt 天 xz V 


(1) 若 3ae (0，1)， 使 当天 充分 大 时 ， 
于 zx"* ， 且 至 少 是 线性 收敛 。 


| <e2。 


zs9 一 症 * | 
| ze -zx | 


<a， 则 {xz ”| 收 伍 
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lzee -| 


(2) 若 存在 正 数列 fa | 一 0， 使 当天 充分 大 时 ， 5 则 
xz 人 9 | 超 线性 收敛 于 rz " 。 
(3) ix | 超 线性 收敛 于 x 全 lim 


lz 下 


由 xz 一 贡 * | 0。 


lz 
(0) 全 号 
(4) {z ”上 | 超 线性 收敛 于 x 一 lim Il1。 


定理 4-1 (4) 表明 ,， 若 算法 超 线性 收敛 ， 当 大 充分 大 时 ， 可 保证 
lz -zx 上 同 lz -zx | 是 相当 的 。 因 此 对 于 超 线性 收敛 的 算法 ， 用 停机 条 件 
lz -zx 下 <e 是 合理 的 。 

我 们 构造 算法 时 ， 和 希望 其 具有 超 线性 收 倒 速 度 ， 至 少 应 有 线性 收敛 速度 。 


4.1.4 线性 搜索 算法 


在 多 变量 数学 规划 问题 的 算法 中 ， 多 采用 线性 搜索 的 模式 ， 即 在 每 一 步 友 代 
中 进行 如 下 工作 〈 设 得 到 和 迭代 点 zx” ) : 

(1) 确定 搜索 方向 d”。 

(2) 求人 ,使 Frzto +Aid ) =miniFz +AdO )1IAER,|。 

(3) 新 迭代 点 : 令 0 = +AsdD 。 

此 模式 中 ，(1) 的 do 的 产生 方法 不 同 ， 就 得 到 不 同 的 算法 ; 〈2) 是 表示 
从 zx 和 9 点 出 发 沿 方向 di 寻找 在 对 步 长 因子 和 的 一 定 限制 范围 内 的 最 小 值 点 ， 称 
为 线性 搜索 或 一 维 搜索 ，R, 是 针对 问题 得 到 的 限制 集合 。 

线性 搜索 涉及 的 是 单 变量 的 最 优化 问题 ， 一 般 不 能 经 有 限 步 得 到 解 。 理 论 
上 , 若 R, =R， 则 在 一 定 条 件 下 线性 搜索 的 结果 应 当 有 : 

dfz' +Akd ) 
dA 

线性 搜索 与 算法 的 收敛 性 及 收敛 速度 有 着 密切 的 联系 。 一 般 说 来 ， 线 性 搜索 
达到 相应 方向 上 的 极 小 是 收 伍 性 所 要 求 的 ， 即 精 确 一 维 搜索 。 当 xc? 距离 Y 
很 远 时 ， 要 求 精确 一 维 搜索 的 必要 性 不 大 ， 而 往往 需要 较 多 的 运算 工作 量 ， 这 时 
按照 一 定 的 要 求 来 选择 信 ， 使 得 林 数 下 降 一 定 的 量 ， 可 望 得 到 整体 较 快 的 收 倒 。 
这 类 线性 搜索 称 为 不 精确 一 维 搜索 。 


4.1.5. 二 次 模型 


大 多 数 最 优化 方法 是 从 二 次 模型 导出 的 。 在 讨论 算法 时 ， 人 们 常常 考虑 算法 
用 于 二 次 函数 时 的 特征 ， 在 求 非 线性 极 小 化 的 问题 时 ， 常 讨论 方法 对 正定 二 次 函 


=0, 即 [VKxzto +Adto )]T7dtb =0 
AmAL 
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Lv 一 
数 的 有 利 特 性 ， 并 把 它 作为 对 算法 的 一 个 衡量 准则 。 考 虑 较 多 的 是 二 次 终结 
性 。 

利用 二 次 函数 进行 讨论 有 如 下 优点 : 

(1) 正定 二 次 函数 是 容易 确定 极 小 的 、 最 简单 的 光滑 函数 。 

(2) 一 般 的 光滑 函数 在 其 极 小 点 * "附近 可 用 正定 二 次 函数 很 好 地 逼近 。 因 
此 ， 建 立 在 二 次 模型 基础 上 的 方法 ， 当 和 迭代 点 接近 x“"* 时 ， 可 望 有 较 快 的 收敛 速 
度 。 

(3) 在 给 定 的 精度 下 ， 用 二 次 函数 逼近 比 用 线性 函数 逼近 可 在 较 大 的 区 域 
内 有 效 。 

如 果 一 个 算法 用 于 正定 二 次 函数 求 极 小 时 ， 能 经 过 有 限 步 入 代 达 到 极 小 点 
xz" ， 则 称 此 算法 具有 二 次 终结 性 。 

许多 好 的 算法 都 有 二 次 终结 性 ， 但 并 不 是 说 二 次 终结 性 是 算法 好 坏 的 决 
定性 标准 。 实 际 上 ， 有 不 少 成 功 的 算法 不 具有 二 次 终结 性 ， 也 有 些 算法 虽然 
有 二 次 终结 性 但 效果 不 理想 。 尽 管 如 此 ， 许 多 好 的 算法 还 是 同时 具有 超 线 性 
收敛 速度 和 二 次 终结 性 。 对 一 般 函 数 而 言 ， 具 有 二 次 终结 性 的 算法 可 望 在 接 
近 极 小 点 时 具有 很 好 的 收 剑 性 。 因 此 ， 二 次 终结 性 仍 可 作为 选择 算法 的 一 个 
因素 。 

对 于 无 约束 极 小 化 问题 ， 即 ( 信 ) 问题 中 8S = R" 的 情况 ， 二 次 终结 性 可 形象 
地 表示 为 : 

二 次 终结 性 = 共 罗 方向 + 精确 一 维 搜索 

4.1.6 下 降 算 法 模型 

考虑 问题 

min 九 z) 
订 扒 

下 降 算 法 的 思想 是 : 使 算法 产生 点 列 {x@ 上 对 应 的 函数 列 |7x ) | 为 严格 单 
调 下 降 数列 ， 即 Yk, Kxze) <Kz”)。 

依照 线性 搜索 模式 ， 首 先 要 找 下 降 可 行 方向 。 

设 zeS， 对 方向 d, 若 36>0，(5=5(z,d))， 使 Kxz+id) <Frz)，YAE 
(0，5) ， 则 称 4 为 几 z) 在 点 的 下 降 方向 。 

易 证 ， 若 fx) 在 z 点 可 微 , d 使 FLz) d<0， 则 d 为 下 降 方向 。 


对 问题 ( 形 ) ， 只 找到 下 降 方向 ， 有 时 还 不 能 产生 新 的 迭代 点 ， 还 要 求 为 可 行 
方向 。 即 36>0, 使 x+AdeS，VYAeE(0,5)。 
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同时 满足 下 降 方向 与 可 行 方向 条 件 的 方向 称 为 下 降 可 行 方向 。 


4.2 一 维 搜索 算法 
求解 最 优化 问题 的 基本 方法 是 给 定 一 个 初始 可 行 点 rto) e 刀 ， 由 这 个 初始 可 
行 点 出 发 ， 依次 产生 一 个 可 行 点 列 zx0) ， Xe) ， 9 Xt ， 7 记 为 jx | ， 使 得 


或 者 某 个 x 思 恰好 是 问题 的 最 优 解 ， 或 者 该 点 列 |x'% | 收敛 到 问题 的 一 个 最 优 解 
x* 。 这 就 是 我 们 平时 所 说 的 迭代 算法 。 在 迭代 算法 中 ， 由 点 zx'9 迭代 到 ze 
时 ， 要 求 凡 ze ) 二 zt ) ， 这 种 算法 称 为 下 降 算 法 。 点 列 {x'% } 的 产生 常 采取 
两 步 来 完成 : 首先 ， 在 可 行 域内 zx 点 处 求 一 个 方向 P 9 ， 使 得 拟 z) 沿 方向 忆 
移动 时 方向 有 所 下 降 ， 一 般 称 这 个 方向 为 下 降 方向 或 搜索 方向 ; 其 次 ， 以 x'” 为 
出 发 点 ， 以 已 2 为 方向 作 射 线 ，z =x +og ， 其 中 必 >0。 在 此 射线 上 求 
一 点 tk+D) (t+1) 二 半 介 平 ai 使 得 FCzxztes0 ) 三 (0 ) 其 中 ar 称 为 步 
长 。 

一 维 搜索 算法 是 根据 可 行 点 zx ”与 下 降 方向 驻 ”" ， 结 合 F(z) ， 确 定 步 长 am 
的 算法 。 经 典 优化 算法 一 般 都 是 由 搜索 方向 与 搜索 步 长 两 个 迭代 步 又 组 成 的 。 一 
维 搜索 算法 效果 的 好 坏 ， 直 接 决定 整个 优化 算法 的 效果 ， 所 以 说 搜索 算法 对 于 优 
化 算法 是 至 关 重 要 的 。 一 维 搜索 算法 根据 其 搜索 方法 的 特点 主要 分 为 精确 一 维 搜 
索 算法 与 非 精 确 一 维 搜索 方法 。 下 面 主要 介绍 三 种 具有 代表 性 的 搜索 算法 ， 分 别 
是 精确 一 维 搜索 算法 的 进退 法 、 黄 金 分 割 法 ， 非 精确 一 维 搜索 算法 的 沃 尔 夫 
(Woife) 法 。 

测试 函数 为 : 

P(xiyxz) =%1 + 迷 一 10xixy +1 

MATLAB 程序 表达 式 为 : 
function f= objfoun(x) 
f=x(1)“3+x(2) 人 2 -10*x(1)*x2)+1; 
初始 点 (0,0) ,搜索 方向 (1,1) 
图 4-1 的 MATLAL 程序 为 ; 

xX=0:0.1:3; 

了 =xi 

[X,Y] = meshgrid(x,y); 

了 = 人 +TY 2 一 10*X *T+1li; 

surfc(X,Y,Z) 
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4.2.1 黄金 分 割 法 (精确 一 维 搜索 ) 


黄金 分 割 法 是 一 种 常用 的 精确 一 维 搜索 。 如 果 设 .F(x) 在 初始 区 间 [a，50] 
上 是 一 个 下 单 峰 函 数 ， 则 拟 x) 在 [a，5] 有 唯一 的 极 小 点 *” ， 黄 金 分 割 法 就 是 
求解 这 样 极 小 点 的 一 种 有 效 方法 。 

黄金 分 割 法 的 算法 步骤 为 ; 


给 定 ac， 


ba <5) ,控制 误差 e >0。 


一 般 取 [ee，2] 为 [0，1] ， 当 然 也 可 以 根据 需要 调整 。 如 果 目 标 函数 对 变 


量 非 常 灵敏 ， 


可 以 将 步 长 的 可 行 范围 缩小 ， 以 提高 搜索 精度 ; 反之 ， 可 以 将 步 长 


的 可 行 范围 放大 ， 以 提高 算法 的 计算 速度 。 


步骤 工 : 


步 阳 2: 
步 野 3; 
步骤 4: 


步骤 5 


令 丸 =a+0.618(5-a) ,所 = 所 z) 转 步 又 2。 
令 z=a+0.382(0 -a), 上 =Hm) 转 步骤 3。 


若 4 -al<e, 则 zx” =<， 停 ; 否则 转 步 又 4。 
若 扩 < 户 ， 则 5=x， 2 =%i 万 = 矿 ， 转 步 又 2; 
若 太 = 万， 则 ac=zx， 避 =x2z， 转 步骤 1; 

若 扩 > 万， 则 aa=x， xl =%2， 万 = 及 ， 转 步 又 5; 
令 刀 =a+0.618(5 -aa) ,所 =Fx)， 转 步 驰 3。 





MATLAB 程序 源码 为 
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function Pa = golden(x,p,LowBound ,UpBound ) 
9% code by ariszheng ! 
% email :ariszheng@ gmail, com 

% golden is function for golden linear search 
和 %x(k+1) =x(k) +Pa*pi 

2%p input; 

%  x: 搜 索 初始 点 

% ”p: 搜 索 方向 

双 LowBound ,UpBound :搜索 区 间 

驴 output: 

和 Pa: 搜索 步 长 


disp( "it is the golden linereasch”) ; 
% ”搜索 步 长 范围 (0,1]】 可 以 根据 需要 修改 
gold_a = LowBound ; 
gold_b = UpBound; 
Z2=gold_a+0.618* (gold_b -gold_a); 和 %%stepl， 
亿 =objfun(x+z 到 *p); 
zl =gold_a+0.382* (gold_b -gold_a) ;多 %step2 
亿 =objfun(x+zl*p); - 
in_itera =0; 
while abs (gold _b - gold _a) > 0. 0000000001 免 ahs a=0,b=1l1 golden 
linesearch 
in_itera = in_itera + 1 ; 
和 5 间 , 人 2 
ifl< 也 
gold_b =22; 
22=zl; 
人 2 = 人 ; 
”2L=gold_a+0.382*(gold_b -gold_a); 
入 =objfun(x+2zl*#*p); 
continue 
elseif 引 一 也 
gold_a =zl; 
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gold_b =22; 
z2 =gold_a +0.618 * (gold_b - gold_a) ;和 % 和 %stepl 
亿 =objfun(x+22*p); 
zl =gold_a+0.382* (gold_b -gold_a);9% 和 step2 
fi =objfun(x+zl*#p); 
continue 
else 
gold_a=zl; 
ZL =22; 
且 = 全 ; 
Z2=gold_a+0.618*(gold_b -gold_a); 
人 2 =objfun(x+z2*p); 
end 
end 
Pa =(gold_a+goldb)《X2; %Pa x(k+1l) =x(k)+Pa*yrpi 
和 Pa ,in_itera 
和 obj(x+Pa*p) 
9 
MATLAB 本 数 的 使 用 方法 : 
1. 定义 目标 函 教 :( 列 文件 ) 
function f = objfun(x) 
f=x(1)"3+x(2)22 -10*x(1)*x(2) +1; 
2. 确定 初始 搜索 点 与 搜索 方向 
X=[0,0];P=[1,1] 
3. 调用 函数 计算 
以 [0,1 ] 为 搜索 区 间 
Pa = golden(X,P,0,1) 
Pa =1 


4.2.2 进退 法 


对 于 精确 一 维 搜索 ,一般 都 要 求 岂 zx) 在 初始 区 间 [ae，05] 上 是 一 个 下 单 峰 
郴 数 。 进 退 法 就 是 求解 函数 成 xz) 下 单 峰 区 间 [ac，5] 的 一 种 常用 方法 。 

进退 法 的 算法 步骤 为 : 

给 定 初始 点 xo， 初 始 步 长 Ax( >0) 。 


golden linesearch end 
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步骤 1 计算 所 xo) ， 转 步 骤 2。 

步 叉 2: x; =xo +Ax， 计 算 Hx)。 

若 Xxi ) < 二 几 xo) ， 则 转 步 又 3; 否则 转 步 又 5。 

步 叉 3: 令 Ax =2Axz，z =xi +Ax， 计 算 , 几 xz)。 

若 拟 xz ) 生 几 zi) ， 则 得 到 区 间 [x，z]】 为 初始 区 间 ， 停 ; 

若 扩 zx) >Xxa) ， 则 转 步 双 4。 

步 野 4: 令 z =2,xi = 和 ,所 xzo) = 所 zi) ,所 zi) = 所 和 2) ， 转 步 又 3。 
步骤 5: 令 Ax =2Axz， xz =x -Ax， 计 算 扩 zz)。 

若 拟 xzo) 和 所 和 2) ， 则 得 到 区 间 [x> ，x ] 为 初始 区 间 ， 停 ; 
若 扩 xzo) > 所 za ) ， 则 转 步 又 6。 

步 叉 6: 令 =xoxo = 恩 , 所 和) = 所 xz) ,所 xzo) = 所 和 ) ， 转 步骤 5。 
程序 的 流程 图 如 图 4-2 所 示 。 


xi=xo+ Ax 计算 /xD 







AX=2AY ) 着 2 一 美 } 十 奥 尖 7 


计算 (2) 






Ax=2AY，X2 一 I 一 Ax， 


计算 .fxa) 









JUzD>Axa? 







0 到 区 着 一 X2 
所 xzo0=xyD 
xD=x2) 


本 X0X0 西区 2 
Jri)= xzo) 
.xzo)=FO2) 
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MATLAB 的 源码 为 : 
function[ LowBound ,UpBound] = TryBound( x0 ,step0 ,StartOpint,SearchDirection ) 
% code by ariszheng 
% email :ariszheng@ gmail, com 
和 TryBound is function to find fit Bounds for precision search 
和 input; 
% xx0: 探 测 初 始点 
% step0 :初始 探测 步 长 
output: 
% [LowBound,UpBound] : 可 行 搜索 区 间 
狗 一 -一 一 TryBound Start 
step = step0 ; 
狗 狼 步 双 1 
和 =TryObjftun(x0 ,StartOpint,SearchDirection ) ; 
多久 步 颈 2 
xl = x0 + step0 ; 
fl =TryObjftun(xl ,StartOpint,SearchDirection ) ; 
让 引 <= 纯 
和 和 久 步 又 3 
while true 
gstep = 之 Step; 
X2 =XL +step; 
人 2 = TryObjfun(x2 ,StartOpint ,SearchDirection ) ; 
这 fl <= 仑 
LowBound =x0; 
UpBound = 友 ; 
break ; 
else 
多 驴 步 又 4 


end 
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end 
else 
驴 % 步 又 5 
while true 
step = 之 * step; 
22 =z0 -stepi 


人 包 = TryObjfun(x2 ,StartOpint ,SearchDirection ) ;， 


计 切 <= 纯 
LowBound = x2 ; 
UpBound = xl ; 
break ; 
else 
久久 步 又 6 
xl =x0; 
x0 =7X2; 
fl =f0; 
和 = 卫 ; 
end 
end 
end 
% 一 -TryBound End 
MATLAB 郴 数 的 使 用 方法 为 : 
1. 定义 目标 函数 :( 了 -文件 ) 
function f= objfun(x) 
f=x(1)“3+x(2) 人 -10*x(1)*x(2) +1i; 
2. 确定 初始 搜索 点 与 搜索 方向 
X=[0,0];P=fl,1] 
3. 定义 一 维 搜索 函 米 
function f= TryObjfun(a,StartOpint ,SearchDirection ) 
f = objfun(StartOpint + a *# SearchDirection ) ; 
% 计算 x = StartOpint + a_ * SearchDirection 的 本 数 值 
% StartOpint = [0,0] 
% SearchDirection =[1,1] 
4.， 确定 初始 搜索 区 间 


人 


66 运筹 学 与 最 优化 MATLAB 编程 


色 以 0 为 初始 探测 点 ,0. 01 为 探测 步 长 。 

>> [LowBound ,UpBound] =TryBound(0,0.01,[0,0j,[1,1]) 
LowBound =2. 5500 
UpBound = 10. 2300 

4-3 为 步 长 可 行 区 间 的 ( 步 长 一 函数 值 ) 图 像 。 








5. 根据 下 单 峰 的 初始 区 闻 用 精确 一 维 方法 确定 下 降 步 长 
>> Pa = golden([0,0] ,[1,1] ,LowBound ,UpBound) 
Pa =06. 0000 
>> TryObjfun(6,[0,0] ,[1,1]) 
ans = 一 107 


4.2.3 沃 尔 夫 法 


在 解 非 线 性 规划 问题 时 ， 一 维 搜索 一 般 很 难 达到 真正 的 精确 值 。 为 了 达到 比 
较 高 的 精度 ， 往 往 需 要 计算 很 多 个 函数 ， 计 算 量 大 。 为 此 引入 了 不 精确 一 维 搜 
索 ， 它 只 计算 少量 的 函数 值 就 得 以 得 到 一 个 下 降 点 。 沃 尔 夫 (Wolfe) 算法 就 是 
一 种 非常 有 效 的 不 精确 一 维 搜索 算法 。 
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设 岂 xz) 可 微 ， 取 we{0 ,到 ] ,cs(e,D， 选取 w >0 使 其 满足 


(1) Kxz) -xz +aip 人 ) > -HaigcbTpO 
(2) | V 户 (zt 二 ap 避 )P0 | 三 一 BTPDC 
得 到 一 个 单调 下 降 的 收敛 点 列 {as| 。 
算法 的 几何 描述 如 图 44 所 示 。 


天 斜率 B=aVCxltrDJTd(b 








3y=Jtedb)+pVACebJTdA 


Jrdb+hAd 由 ) 


沃 尔 夫 算法 的 具体 步骤 如 下 ， 
步骤 工 给 定 we [0 于] ,re (usD， 令 a=0， = 全 a=1， J=0。 


步骤 2: zx = +aip 和 OO ， 计 算 FzteeD) ,8(zCeD )。 

若 x 满 足 (1) 和 (2)， 则 um =a， 停 。 

若 a 不 满足 (1) ， 令 j =j+1， 转 步骤 3。 

若 a 不 满足 (2) ， 令 j =j +1， 转 步骤 4。 4 


步 最 3: 令 0=a， ac = 转 步 又 2。 





步 野 4: 令 o=a，a=min|2a， | 转 步 又 2。 
MATLAB 程序 的 源码 为 ; 


function Pa = wolfe(x,p) 
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code by ariszheng 
2% email :ariszheng@ gmail. com 
和 wojlfe is function for wolfe linear search 
和 % x(k+1)=x(k) +Pa*rpi 
和 input : 
%  x: 搜 索 初始 点 
% pp: 搜索 方向 
和 output ， 
% Pa: 搜索 步 长 
和 一 一 -一 golden linesearch 
% initial the parament 设置 参数 (可 以 根据 需要 调整 ) 
wojfe u=0.1; 
wolfe_] =0. 5; 
wolfe a=0; 
wolfe_b = 1000; 
wolfe_Pa =1;% 初 始 步 长 
MaxIterNum =50; 色 搜索 最 大 选 代 次 数 
j =0; 
N =jlength(x); . 
物 物 物 忽 忽 start the iteration 攻 物力 篇 鹅 匾 物 匠 乃 
x0 =x; 
和 =objfun(x0) ; 
gL = 中 ffobjfun(x0) ; 
for i=1:MaxIterNum 
X=x0O+wolfe_Pa*rpi 
全 =objfon(x) ; 
只 =diffobjfun(x) ; 
% conditionl 判别 条 件 一 
templ = 名 ~ 人 纪 +wolfe_u*# wolfe Pa*rgl*xp?; 
% condition 2 判别 条 件 二 
temp2 = abs( 上 2P*p”)+wolfe 1]*gl*p; 
if(templ > =0&&temp2 <=0) 
和 鲍 如 果 同 时 符合 条 件 一 、 二 和 迭代 停止 


Pa = wolfe_Pa; 
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break 
elseif templ <0 
%%% 条 件 一 不 符合 
j=j+li; 
wolfe_b = wolfe_Pa; 
色 计算 新 步 长 
wolfe_Pa = (wolfe_Pa + wolfe_a)/2; 
else 
%%% 条 件 二 不 符合 
j=j+1l; 
wolfe_a = wolfe_Pa; 
多 计算 新 步 长 
wolfe_Pa = min(2 * wolfe_Pa,(wolfe_Pa + wolfe_b)/X2) ; 
end 
end 
Pa = wolfe_Pa; 
in_itera =j;% 总 计算 次 数 
和 一 -一 一 一 wolfe linesearch end 
MATLAB 本 数 的 使 用 方法 为 : 
1. 定义 目标 函 教 与 目标 函 教导 教 :(M 文件 ) 
fnction f = objfan(x) 
f=x(1)“3 +x(2)2 -10*x(1)*x(2) +li 
function df = diffobjfun(x) 
opf=xf1)2+x(2) 人 -10*x(1)*x(2)+1; 
df(1) =3*xx(1)2-10*x(2); 
df(2) =2*x(2) -10*x(1); 
计算 导数 的 方法 有 多 种 ,目标 函数 简单 并 可 以 直接 求 出 单数 ;当然 ,也 可 以 使 
用 数值 差分 的 方法 计算 导数 。 
2 确定 初始 搜索 点 与 搜索 方向 
X=[0,0];P=[1,1j 
3. 调用 函 教 计算 
Pa = wolfe(X,P) 
Pa =9 
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4.3 MATLAB 郴 数 Fminbnd 


单 变量 固定 区 间 的 最 优 模型 为 ; 
min 厂 {(X) ，g.t; Xi <X<2o 

Fminbnd 本 数 是 MATLAB 中 最 强大 的 在 固定 区 间 上 的 一 维 搜索 函数 ， 采 用 的 
是 黄金 分 割 〈Golden Section Search) 与 抛物 捅 值 法 〈(Parabolic Interpolation) 相 
结合 的 算法 ， 因 此 不 需要 设 定 初始 迁 代 点 。 

Fminbnd 函数 的 语法 为 : 
x=fminbnd(fun,xl,x2) 
Xx=fminbnd(fuon ,xl ,x2 ,options) 
[x,fval] =fminbnd(.,. ) 
[x,fval ,exitlag] =fminbnd(...) 
[x,fval ,exittlag ,output] = fminbnd(... ) 
本 数 输入 : 
un 目标 函数 
xl ;可行 区 间 下 界 
2: 可 行 区 间 上 界 
options : 函数 参数 
柄 数 输出 : 

x: 最 优点 

fval :最 优点 对 应 的 函数 值 

exitlag: 函数 结束 信息 

output :函数 计算 信息 

MATLAB 函数 的 使 用 方法 为 ; 

1. 定义 目标 函 孝 :( 文件 myfun. m) 

以 ALx) =sin(x) +er 为 目标 函数 对 应 的 M 文件 : 
function f = myfun(x) 
f=sin(x) +exp(x); 

2. 调用 函 教 Fminbnd 
OPTIONS = optimset( "display" ，iter' ) ;设置 优化 参数 ,显示 和 迭代 过 程 
OPTIONS 设置 参看 附录 Optimization option 
[x,fval,exitlag ,output] = fminbnd(@ myfun,0,5,options) ;求解 是 标 函 数 在 [0,5] 
区 间 上 的 最 小 点 及 其 对 应 的 本 数 值 
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计算 结果 (具体 和 迭代 步骤) : 


Func-count X f (xy) Procedure 
1 1. 90983 7. 69502 initial 
2 3. 09017 22. 0322 golden 
3 1. 18034 4. 18022 golden 
4 0.917271 3. 2964 parabolic ， 
5 0. 566905 2. 29983 golden 
6 0. 350366 1. 76283 golden 
学 0,. 216538 1. 45662 golden 
8 0. 133828 1. 27663 golden 
9 0. 0827103 1. 16884 golden 
10 0. 0511178 1. 10354 golden 
11 0. 0315925 1. 06368 golden 
12 0. 0195253 1. 03924 golden 
13 0. 0120673 1.02421 golden 
14 0. 00745798 1.01494 golden 
14 0. 00460929 1. 00923 golden 
16 0, 0028487 1. 0057 golden 
17 0. 00176059 1. 00352 golden 
18 0. 00108811 1. 00218 ， golden 
19 0. 000672486 1. 00135 golden 

20 0. 000415619 1. 00083 golden 
21 0. 000256867 1. 00051 golden 
22 0. 000158752 1. 00032 golden 
23 9. 81144e-005 1. 0002 gojden 
24 6. 0638e-005 1. 00012 golden 


最 优 性 终止 : 当前 x 满足 OPTIONS. TOLX 的 终止 条 件 1. 000000e-004。 
x=6.0638e -005 最 优点 
fval =1. 0001 最 优点 对 应 的 函数 值 
exitlag = 1 
output = 
iterations: 23 
funcCount: 24 
algorithm: ” golden section search ，parabolic interpolation， 
message: [1xl112 char] 
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线形 规划 (Linear Programming) 是 运筹 学 中 应 用 最 广泛 的 模型 之 一 。 由 于 
其 理论 与 方法 研究 比较 成 熟 ， 许 多 问题 常 借助 线形 规划 模型 来 求解 ， 而 且 线 形 规 
划 为 某 些 非 线 性 规划 问题 的 解法 起 到 间接 作用 。 


s.1 线性 规划 的 模型 结构 


max( min ) 太 = cx 二 czxa 十 … 十 CnXn 


ga.t ax +aoxa 二 十 Ginxns( = 二)0 


a2ixi + azxX2 十 … + Ganxns( = ， 二 )b2 


QIXI 二 Gox2 十 … 十 Gumxuss( = 二)0。 
Xi xy… XuEP0 
线性 规划 的 标准 形式 为 : 
max 厂 = ciXl 十 C2X2z 十 … 十 CnXn 
st QHXI 十 Gox2 十 … 十 QUX 二 四 


GoiX1 二 Q22X2 十 十 GaaxXa 二 有 2 


QiXi +Gox2 十 十 Cn 二 让。 

Xi 5Xa XuEP0 1 
转化 成 矩阵 的 表示 形式 为 : 

max 六 ) = cx 

st 4xz=D 

XI10 
标准 形式 的 可 行 域 是 凸 集合 〈 凸 集合 概念 可 以 参看 相关 章节 ) 。 
各 种 形式 的 线性 规划 都 可 以 化 为 标准 形式 。 
(1) 若 给 出 的 线性 规划 是 极 大 化 目标 函数 ， 则 有 
min 拟 z) = max[ -成 z) ] 

(2) 若 第 i 个 约束 为 不 等 式 ， 则 可 增加 松弛 变量 ， 把 原 约束 化 为 等 式 约 束 。 
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若 况 三 太 , 则 加 入 xs 0 ,得 到 : 

袜 om + Xnsl = 有 
目标 函数 保持 不 变 ， 即 松弛 变量 *,,: 的 目标 函数 系数 为 c.:: =0。 
类 似 地 ， 若 第 ;个 约束 为 : 


or 三 思 


则 名 CGWXi 一 %nrl 三 六 xi 全 0 
(3) 若 第 ;个 等 式 约 束 中 点 <0， 则 用 -1 冬 该 等 式 两 端 。 
(4) 若 第 /个 变量 % 没有 非 负 限制 ， 此 时 称 尺 为 自由 变量 ， 则 引入 两 非 负 
变量 ， 即 xj ，xi'=0， 令 xi =xj- 妇 ， 将 其 代 人 目标 函数 以 及 约束 中 去 。 
例如 : 
min = 一 Xi 一 22 一 53 
stL 7xi +3x2 +9x3 1 
8x, +Sx) +4x3 <1 
6xi +9x2 +5X3 三 1 
xl 22 2 二 0 
引入 松弛 变量 *x, ，xs ，xs0， 原 式 变 为 线性 规划 的 标准 形式 为 : 
max 厂 =Xi 十 X2 十 X3 十 0xs 二 0xs 二 0xi 
st 7xi +3x: +9x3 +2%y +0Oxs +0Ox5 = 
8xi +5x2 +4x3 二 0Ox4 +1xs +Oxc = 工 
6xi +9xz +Sx3 +0Ox +0xs +x6 =1 


XI1 ya2 ,X3 4 5 06 二 0 


5.2 线性 规划 的 单纯 形 法 


单纯 形 法 (Simplex Method) 是 求解 线性 规划 问题 的 通用 方法 。 单 纯 形 是 
美国 数学 家 C. B. 丹 齐 克 于 1947 年 首先 提出 来 的 。 它 的 理论 根据 是 : 线性 规 
划 问 题 的 可 行 域 是 =” 维 向 量 空间 丸 " 中 的 多 面 凸 集 ， 其 最 优 值 如 果 存 在 ， 必 在 
该 凸 集 的 某 顶 点 处 达到 。 顶 点 所 对 应 的 可 行 解 称 为 基本 可 行 解 。 单 纯 形 法 的 基 
本 思想 是 : 先 找 出 一 个 基本 可 行 解 ， 对 它 进行 鉴别 ， 看 是 否 是 最 优 解 ; 若 不 
是 ， 则 按照 一 定 法 则 转换 到 另 一 改进 的 基本 可 行 解 ， 再 鉴别 ; 若 仍 不 是 ， 则 再 
转换 ， 按 此 重复 进行 。 因 基本 可 行 解 的 个 数 有 限 ， 故 经 有 限 次 转换 必 能 得 出 问 
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题 的 最 优 解 。 如 果 问 题 无 最 优 解 也 可 用 此 法 判别 。 单 纯 形 法 的 一 般 解 题 步骤 可 
归纳 如 下 : @D 把 线性 规划 问题 的 约束 方程 组 表示 成 标准 型 方程 组 ， 找 出 基本 可 
行 解 作为 初始 基本 可 行 解 ; @ 若 基本 可 行 解 不 存在 ， 即 约束 条 件 有 矛盾 ， 则 问 
题 无 解 ; @ 若 基本 可 行 解 存在 ， 从 初始 基本 可 行 解 作为 起 点 ， 根 据 最 优 性 条 件 
和 可 行 性 条 件 ， 引 入 非 基 变 量 取代 某 一 基 变 量 ， 找 出 目标 函数 值 更 优 的 另 一 基 
本 可 行 解 ; 图 按 步 又 3 进行 迭代 ， 直 到 对 应 检验 数 满足 最 优 性 条 件 〈 这 时 目标 
函数 值 不 能 再 改善 ) ， 即 得 到 问题 的 最 优 解 ; 回 若 和 迭代 过 程 中 发 现 问题 的 目标 
函数 值 无 界 ， 则 终止 迭代 。 

数学 优化 中 ， 由 George Dantzig 发 明 的 单纯 形 法 是 线性 规划 问题 数值 求解 的 
流行 技术 。 有 一 个 算法 与 此 无 关 ， 但 名 称 类 似 ， 它 是 Nelder-Mead 法 或 称 下 出 单 
纯 形 法 ， 由 Nelder 和 Mead 发 现 〈1965 年 ) ， 这 是 用 于 优化 多 维 无 约束 问题 的 一 
种 数值 方法 ， 属 于 更 一 般 的 搜索 算法 的 类 别 。 这 二 者 都 使 用 了 单纯 形 的 概念 ， 它 
是 六 维 中 的 W+1 个 顶点 的 凸 包 ， 是 一 个 多 胞 体 : 直线 上 的 一 个 线 侦 ， 平 面 上 的 
一 个 三 角形 ， 三 维 空间 中 的 一 个 四 面体 ， 等 等 。 


s.2.1 单纯 形 算 法 
max Fr) = cx min g(r) = -cx 
st 4x= 古 一 st 4x = 互 
YE10 ZE10 
设 和 矩阵 4 的 秩 为 m。 
算法 说 明 : 


本 书 以 线性 函数 最 大 化 〈 即 max) 给 出 ， 但 是 由 于 MATLAB 的 内 署 函 数 都 
是 以 最 小 化 形式 进行 编程 的 ， 为 了 编写 的 程序 与 MATLAB 的 风格 一 致 ， 本 书 程 
序 是 以 最 小 化 的 标准 形式 进行 编程 实现 的 。 两 种 形式 在 算法 步骤 上 只 有 目标 函数 
系数 向 量 e 的 正 负 号 相反 。 请 读者 在 阅读 时 注意 两 者 的 区 别 。 


步骤 1;， 取得 一 个 初始 可 行 基 妃 ， 写 出 初始 基 可 行 解 土 = 加 = 、 以 
及 当前 的 目标 函数 值 x = cfze = ci 刀 -: 古 ， 计算 所 有 检验 数 oj， J=1， 7 2 


ov =cr -ciB-N。 

步 叉 2:; 考察 所 有 检验 数 mi, J =1，2，…，n,， 若 所 有 检验 数 oj=0， 则 当 
前 基 为 最 优 解 ， 停 。 否 则 转 步 骤 3。 

步 昧 3: 令 ok =maxioilci >0|。 若 下- 下 大 0， 则 无 最 优 解 ， 停 。 否 则 转 步 
骤 4。 
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步骤 4: 仿 g-min| 
( 吾 - Pi)， 
基 。 


步 最 5: 


新 得 的 基 可 行 解 及 判别 数 : 


( 妞 - 太 )， 


| (ep >0= < 用 二 代 竺 得 新 


(至 ph )， 


VJ=1,2,…) 


b， 
已 = 必 一 一 0 天 7 
三 


跌 


0 
Or = Ori 2 
GA 


转 步 又 2。 


s.2.2 单纯 形 表 格 法 的 MATLAB 程序 ， simpiexTab 
MATLAB 优化 库 函 数 都 是 以 最 小 化 为 标准 ， 所 以 simplexTab (mat，numFree- 


Var) 程序 也 以 最 优化 为 标准 。 
simplexTab 的 使 用 方法 为 : 


先 将 一 般 的 线性 规划 变 为 线性 规划 的 标准 形式 ， 再 构建 初始 单纯 形 表 格 ， 输 


人 程序 。 例 如 ; 
max 三 = 一 %t 一 Xa 一 X3 
3 七 7Txi +3xz +9xi<1 |s.t 
8xi +5x) +4x3 三 1] 之 
6x, +9xa +Sx3 生 1 


1 ?和 2 1Y3 >0 
单纯 形 表格 为 ; 


min &g =%l 十 %a 十 %a 十 0xs +Oxs +Ox6 


Txi +3xa +9x3s +%4 +0xs +0xs =1 
8x, +Sx: +4x3 +0xs +1xr +0Oxs =1 
6Oxi +9x: +Sx3 +0Oxs +0xs +xc =1 


区 1 ?区 2 ?X3 9 和 4 ?区 5 3 和 6 =0 
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1. 人 


| 0 | % |oe 什 ) | 





注 : 二 处 显示 标准 型 ( 求 min) 人 
2. 选 代 过 程 表 





在 MATLAB 的 command window 输入 ; 
mat= [7 3 9 1 0 0 1 
8g854010 1 
693500 1 1 
-1 -1-1 000 0]; 
numFreeVar =3;% (注释 : 自由 变量 个 数 ) 
simplexTab (mat，numFreeVar) 
在 MATLAB 的 command window 输出 : 
初始 结果 ; 
the best Pivot is 2 row and 1 col 
the simplex table ijs 


7.0000 ”3.0000 “9.0000 ”1.0000 0 0 1.0000 “0.1429 
8. 0000 ”5.0000 4. 0000 0 1.0000 0 1.0000 0. 1250 

(6.0000) “9.0000 “5.0000 0 0 1.0000 “1.0000 0.1667 

-1.0000 -1.0000 -1.0000 0 0 0 0 0 
第 一 次 转换 结果 ; 


the best Pivot is 1 row and 3 col 
the simplex tabjle is 


0 =-1.3750 (5.5000) 1 -~0.8750 0 0. 1250 0. 0227 
1 0. 6250 0. 5000 0 0.1250 0 0. 1250 0. 2500 
0 35. 2500 2. 0000 0 -0.7500 1 0. 2500 0. 1250 
0 -0. 3750 -0.5000 0 0.1250 0 0. 1250 0 
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第 二 次 转换 结果 ; 
the best Pivot is 1 row and 2 col 
the simpjlex tabjle is 


0 (-0.2500) 1.0000 0.1818 -0.1591 0 “0. 0227 -0.0909 
1. 0000 0. 7500 0 -0.0909 “0.2045 0 0.1136 0. 1515 
0 5.7500 0 -0.3636 -0.4318 1.0000 0.2045 0. 0356 
0 -0. 5000 0 “0.0909 “0. 0455 0 “0. 1364 0 

第 三 次 转换 结果 ; 
0 0 1.0000 “0.1660 -0.1779 0.0435 “0.0316 -0.0909 
1. 0000 0 0 -0.0435 “0.2609 -0.1304 “0.0870 “0. 1515 
-0 1.0000 0 -0.0632 -0.075$1 ”0.1739 “0.0356 “0.0356 
0 0 0 0.0593 ”0.0079 “0.0870 “0.1542 0 

It is the end! (表示 程序 运行 完毕 ) 
最 后 的 单纯 形 表 为 ; 





msg | | | om | oo | oo | oo 


x =(0.0316 ,0. 0870,0. 0356) ,g =0. 1542, f= -xi -2 -2 = -0.1542 
主 程序 : 
simplexTab( mat,numFreeVar) 
输入 单纯 形 表 mat 
自由 变量 个 数 numFreeVar 
子 程序 :由 主 函 数 调用 
1，function newMat = interChange( mat ,rowl ,row2) 
单纯 形 表 的 两 行 对 调 
2、function newMat = multiFromRowToRow(mat,fromRow ,toRow ,multiplier) 
“ 行 数据 非 主 元 素 消去 处 理 
3 function newMat = mmultMat( mat ,row,mult) 
行 乘 以 mul 得 新 行 数据 
4. function newMat = pivot( mat,row,col) 
以 mat(row,col) 为 轴 做 旋转 
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function simplexTab( mat ,numFreeVar) 


9 Recode by ariszheng 

3%2007 08 09 

各 %o 

和 % 输 入 : 

和 mat 单纯 形 表 

% numFreeVar 自由 变量 个 数 

format short 

和 检验 和 寻找 最 佳 判 别 数 

和 % maxRow,maxCol 单纯 形 表 的 行 数 与 列 数 


maxRow = length(mat( :,1)); 
maxCol = length(mat(1,:)); 
%% 判 别 数 
objEntryExcludingMaxPayOff = mat( maxRow ,1 :maxCol -2 ) ; 
多 寻找 最 小 判别 数 
[ objEnt bestColToPivot] = min( objEntryExcludingMaxPayOff) ; 
久久 
色 循环 迭代 
while(objEnt <0) 
狗 出 基 可 行 解 列 
lastColExcludingObjEntry = mat(1:(maxRow -1) ,maxCol) ; 
% 人 基 可 行 解 列 
ithColExcludingObjEntry = mat(1: (maxRow ~- 1) ,bestColToPivot) ; 
儿 找 出 最 小 正比 数 以 及 其 对 应 的 行 
a=]lastColExcludingObjEntry. /ithColExciudingObjEntry; 
[ val bestRowToPivot ] =min(a) ; * 
sprintf(“"the best Pivot is % d row and % d col” ,bestRowToPivot ,bestColTo- 
Pivot ) 
disp( "the simpjiex tablje js” ) ; 
[mat,[a;0] ] 
disp( ”press any key to continue ” ) ; 
Pause ; 
if(val <0) 
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[s indices] =sort(a); 
if(max(a) >0) 
count =1; 
while( s( count) <0) 
count = count +1; 
end 
bestRowToPivot = indices( count) ; 
end 
end 
if(length(a) ==0) 
length(a) 
return 
end 
% 旋转 变换 
mat = pivot( mat ,bestRowToPivot ,bestColToPivot) ; 
% 寻找 最 小 判别 数 了 
objEntryExcludingMaxPayOff = mat( maxRow ,1 :maxCol -2); 
[ objEnt bestColToPivot ] = min( objEntryExcludingMaxPayOff) ; 
% 当 所 有 的 判别 数 都 大 于 0 的 时 候选 代 停 止 
end 
纺 斩 
sprintf( "the best Pivot is % d row and 9d col' ,bestRowToPivot ,bestColToPivot ) 
disp( "the simplex table js” ) ; 
[mat,[a;0]] 
disp( "Ht ia the endl ” ); 
function newMat = interChange( mat,rowl ，row2) 
temp = mat(rowl , : ) ; 
mat(rowl , : ) =mat(row2 ,:); 
mat( row2 , : ) =temp; 
newMat = mat ; 
funetion newMat = multiFromRowToRow( mat ,fromRow,toRow,multiplier) 
rG = mat( fromRow , : ) * multipjlier; ， 
mat(toRow,:) =rG+mat(toRow,:); 
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newMat = at; 
fnction newMat = multMat( mat ,row ,mnult) 
9 mujtiply a row of a matrix by a nonzero constant 
mat( row,:) =mat(row,:) *mult; 
newMat = mat; 
function newMat = pivot( mat ，row ,col ) 
和 normalize this row 
mat( row,:; ) = mat(row,:). /mat(row,col) ;% make the leading a number a 1 
forr=l:length(mat(:,1)) 
if(r~ =row) 
mat = mmultFromRowToRow( mat ,row,r, 一 mat(r,col) ) ; 
end 
end 


newMat = mat; 


S.3 linprog 了 困 数 


linprog 函数 在 MATLAB 优化 工具 箱 Optimization-Toolbox 中 。 
linprog 针对 的 线性 函数 模型 为 
min 了 7x 
s.t 4xs< 瑟 
4eg =zbeg 
肋 三 zx 三 屿 
这 里 .f，xr,，】，5peg， 有 功 ， 友 是 向 量 ，4，4eyg 是 矩阵 。 
Linprog 计算 算法 为 : 
1. 约束 优化 问题 的 拉 格 衣 日 汞 法 〔〈 即 : 内 点 法 ) 
有 关 该 算法 的 介绍 本 章 不 讲 ， 可 以 参看 约束 规划 问题 的 相关 章节 。 
2 单纯 形 法 Simplerx 
linprog 函数 格式 为 : 
1. x=Jinprog(f,A,b)s 
求解 目标 min f *x 约束 A*x<=b. 
输入 : f: 目标 函数 系数 向 基 
A: 不 等 式 约 束 系数 矩阵 
b: 不 等 式 约束 常数 向 量 
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输出 : x: 最 优 解 

2 x=jinprog(f,A,b,Aeq,beq) 

输入 : Aeq: 等 式 约束 系数 矩阵 

Beg: 等 式 约束 常数 向 量 

3. x=IHnprog(f,A,b,Aeq,beq,ihb,ub) 

输入 : ]b: x 的 可 行 域 下 界 

ub: x 的 可 行 域 上 界 

4. x=Jlinprog(f,A,b,Aeq,beq,]b,ub,x0) 

输入 : x0: 初始 迭代 点 〈 这 个 与 linprog 使 用 的 算法 有 关 ) 

5. x=jlinprog(f,A,b,Aeq,beq,jb,ub,x0,options) 

输入 :options 优化 参数 设置 

6.[x,fval] =linprog (...) 

输出 : fral: 最 优 目标 函数 值 

7. [x,lambda ,exitilag ] =jlinprog(... ) 

输出 : lambda，exitlag: 算法 停止 原因 

8.[x,lambda ,exitflag ,output] = linprog(...) 

输出 : output: 优化 结果 的 约束 信息 

9.[ x,fval,exitflag,output,lambda] = linprog(...) 

输出 : lambda: 结果 x 对 应 的 拉 格 朗 日 乘 子 

输出 参数 说 明 ， 

Exitflag: 返回 算法 和 迭代 停止 原因 

返回 值 : 1 算法 收敛 于 解 x， 即 x 是 线性 规划 的 最 优 解 
0 ”算法 达到 最 大 迭代 次 数 停止 迭代 ， 即 x 不 一 定 是 线性 规划 的 最 优 解 
-2 算法 没有 找到 可 行 解 ， 即 算法 求解 失败 ， 问 题 的 可 行 解 集合 为 空 
-3 原 问 题 无 解 ， 即 最 优 解 可 能 为 正 〔 负 ) 无 穷 大 
-4 ”在 算法 中 出 现 除 零 问 题 或 其 他 问题 ， 导 致 变量 中 出 现 非 数 值 情况 
-5 线性 规划 的 原 问题 与 对 偶 问 题 都 不 可 解 
-7 可 行 搜索 方向 人 向量 过 小 ， 无 法 再 提高 最 优 解 质量 

Lambdqa: 返回 解 的 拉 格 朗 日 乘 子 与 约束 符合 情况 

Lower: 求 得 解 越 下界 

Upper: 求 得 解 越 上 界 

Neqlin: 求 得 解 不 满足 不 等 式 约 东 

Eqlin: 求 得 解 不 满足 等 式 约束 

Output: 返回 算法 信息 


82 运筹 学 与 最 优化 MATLAB 编程 


Algorithm: 计算 时 使 用 的 优化 算法 

Cgiterations: 共 斩 梯 度 迭 代 次 数 〈( 只 有 大 规模 算法 时 有 ) 
iterations:， 算法 兴 代 次 数 

Exit message: 返回 结束 信息 


Ss.3.1 实例 演示 1 (对 应 程序 test2) 


min 厂 = 一 %l 一 X2 一 X9 

s. 七 7xl 二 3x2 +9x3 王 ] 
8x, +Sxz +4x3 三 1 . 
6xi; +9x; +Sx3 三 1 
Xi Ma yx3 二 0 


使 用 [ x,fval ,exittlag ,output ,lambda] = linprog(f,A,b,Aeq,beq,lb,ub) 
Command window 输入 
f=[ -1,-1,-1] %% 目 标 函 数 系数 
A=[7,3,9;8,5,4;6,9,5] :% 不 等 式 约束 的 系数 矩阵 
b=[1,1,1] 锡 不 等 式 约束 的 b 
Aeq=[]j 多 等 式 约束 的 系数 矩阵 (该 问题 无 等 式 约束 Aeq 为 空 ) 
beq=[] 饮 等 式 约 束 的 beq( 该 问题 无 等 式 约束 beq 为 空 ) 
b=[0,0,0] 鲍 变量 的 下 界 
ub =[] 免 变 量 的 上 界 ( 无 上 界 约束 ,ub 为 空 ) 
[x,fval,exittlag,output,lambda] = linprog(f,A,b,Aeq,beq,ib,ub) 
Command window 输出 
Optimization terminated. (优化 算法 计算 结束 ) 
x = [0. 0870 ,0. 0356 ,0. 0316] (最 优 解 ) 
fval = -0. 1542( 最 优 解 对 应 的 枉 数值 ) 
exitflag =1( 算 法 收敛 于 解 x, 即 x 是 线性 规划 的 最 优 解 ) 
output 三 
iterations:7( 算 法 迭代 7 次) 
algorithm : "large-scale :interior point”( 使 用 的 算法 是 内 点 法 ) 
cgiterations:0( 共 配 梯度 迭代 0 次 ,没有 使 用 共 柜 梯度 迭代 ) 
message:; "Optimization terminated,. (算法 正常 停止 ) 
lambda = ， 
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ineqlin :[3xl double] 
eqlin:[0xl double ] 
upper:[3xl double ] 
lower:[3xl double] 
lambda ineqlin = [0. 0593 ,0. 0079 ,0. 087 ] ( 符合 约束 条 件 ) 
使 用 linprog 的 单纯 形 法 (对 应 程序 test3 ) 
Command window 输入 
f=[ -1,-1,-1] 色 目标 函数 系数 
A=[7,3,9;8,5,4;6,9,5] ;% 不 等 式 约 束 的 系数 矩阵 
b=[1,1,1] %% 不 等 式 约 东 的 b 
Aeq =[] 色 等 式 约束 的 系数 矩阵 (该 问题 无 等 式 约 束 ,Aeq 为 空 ) 
beq=[] 多 等 式 约束 的 beq( 该 问题 无 等 式 约束 ,beq 为 空 ) 
了 b=[0,0,0] 色 变 量 的 下 界 
ub =[] 色 变 量 的 上 界 ( 无 上 界 约束 ， 册 为 空 
options = optimset(“”LargeScale”" ，off” ，Simplex” , "on ,， "Display，，, ”iter” ) ; 
(设置 优化 方法 为 单纯 形 法 ,展示 每 次 和 迭代 的 结果 ) 
[x,fval ,exitflag ,output,lambda] = linprog(f,A,b,Aeq,beq,lb,ub,[ ] ,options) 
(注释 :optimset 参考 附录 optimset 的 具体 说 明 ) 
Command window 输出 
he defaujlt starting point is feasible ,skipping Phase 
Phase 2:Minimize using simplex. 


ter Objective Dual Infeasibility 
人 ”本 和 A :7 了 +z 一 W 一 下 
0 0 1. 73205 
1 -0.125 [市 司 二 0. 625 
2 一 0. 142857 上 0. 357143 
3 -0. 15415 0 
Optimization terminated. 1 
x=[0. 0870 ,0. 0356 ,0. 0316] 
fval = -0. 1542 
exitflag =1 


output = 
iterations:3( 算 法 和 迭代 3 次 ) 
algorithm ; "medium scale:simplex”( 使 用 的 是 中 规模 的 单纯 形 法 ) 
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cgiterations:[ ] 

message: ” Optimization terminated.” 
]ambda = 

ineqlin;[3xl double ] 

eqlin:[0xl double] 

upper:[3xl double ] 

lower:[3xl double ] 


5s.3.2 实例 演示 2 (对 应 程序 test4 ) 


min 三 = xi +2x2 ++3x3 +4x4 十 Sx5 +6x5 +7x1 十 8xs +9xs +10xio 
stL 7xi +3xa +9x3 1 
8xi +5x2 +4x3 王 1 
Xi 十 MX2 十 X3 十 %4 十 X5 十 X6 十 XI] 十 %a 十 Xo 十 Xio 二 
% 和 5 和 5556 为 和，5，5io0DP0 
使 用 以 下 画 数 格式 : 
[x,fval ,exitflag ,output ,lambda ] = linprog(f,A,b,Aeq,bed,lb,ub,x0,f,A,b,Aeq， 
beq ,lb ,ub ,x0 ,options) 
Command window 输入 : 
f=1l1:10 %1:10 就 是 1,2,... ,10 即 目 标 函 数 系数 
A=[7;,3,9,0,0,0,0,0,0,0; 
8,5,4,0,0,0,0,0,0,0] 名 不 等 式 约 束 的 系数 矩阵 
b =[1,1] %% 不 等 式 约束 的 b 
Aeq=[1,1,1,1,1,1,1,1,1,1] % 等 式 约束 的 系数 矩阵 (该 问题 无 等 式 约束 ,Aeq 
为 空 ) 
beq =1; 色 等 式 约束 的 beq( 该 问题 无 等 式 约束 ,beq 为 空 ) 
lb=[0,0,0,0;,0,0,0,0,0,0] 色 变 量 的 下 界 
ub =[]j 鲍 变量 的 上 界 ( 无 上 界 约束 ,ub 为 空 ) 
options = optimset( " Display”， iter ” ) ;% 展示 算法 每 次 迭代 结果 
x0 =[] %% 不 设置 算法 初始 和 迭代 点 
[x,fval ,exitflag ,output,lambda] = linprog(f,A,b,Aeq,beq,lb,ub,x0,options) 
Command window 输出 : 
Residuals ; Primal Dual Duality Total 
Jnfeas JInfeas Cap Rel 
人 站 一] 人 -水 了 十 Z 一 下 X ”本 和 Error 
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; 2. 87Te +003 2. 89e +001 1. 55e +004 5. 50e +003 
: 2. 16e +002 5.75e -015 1. 12e +003 1. 24e +002 
: 1.83e -014 7.32e -015 1.39e +001 1.77e +000 
: 4.97e -016 9.08e -014 2. 12e +000 3.9le -001 
: 5.78e -015 9. 85e -015 2. 28e - 001 6. 06e - 002 
; 3.93e -015 1.44e -014 1. 12e -001 3. 04e -002 
; 6. 48e -012 2. 04e -015 1. 44e - 003 4. 00e -004 
Iter 7: 7.02e -016 1.28e -015 1. 52e -007 4. 23e -008 
Iter 8: 3.5le -016 5.05$e -016 1.56e -0i4 4. 19e -015 
Optimization terminated. 
x = [ 0. 0000 , 0. 2000 , 0. 0000 , 0. 8000 , 0. 0000 , 0. 0000 , 0. 0000 , 0. 0000 , 0. 0000 ， 
0. 0000] 
fval = 3. 6000 
exitflag = ] 
output = 
iterations ;8 
algorithm ; " large ~- scale :interior point 
cgiterations ;0 
message: "Optimization terminated,“ 
lambda = 
ineqlin:[2xl double] 
eqlin: -4. 0000 
upper: [ 10xl double ] 
lower:[10xl double ] 


Jter 
Jter 
Jter 
Iter 
JIter 
JIter 
ter 


om 上 mi 一口 
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无 约束 最 优化 问题 ， 是 指 优化 问题 的 可 行 解 集 为 R*， 无 约束 的 标准 形式 为 
min 成 xz) 
庆 了 及 "一 及 (6-1 ) 
本 章 主 要 介绍 无 约束 问题 的 基本 思想 和 MATLAB 相关 函数 的 调用 。 对 无 约 
束 问 题 的 基本 结构 理论 的 了 解 ， 有 利于 更 有 效 地 使 用 MATLAB 相关 无 约束 优化 
函数 。 无 约束 算法 的 种 类 繁多 ， 本 章 重点 介绍 最 速 下 降 法 、 牛 顿 法 与 拟 牛顿 法 
〈《 变 斥 度 法 ) 。 拟 牛顿 法 〈 变 尺度 法 ) 是 现在 公认 求解 无 约束 优化 问题 的 最 有 效 
的 方法 。 


本 章 所 用 BenchMark 本 数 为 Banana function 


xzx) =100[x(2) -x(1) +[1-x(1)]? (6-2) 
Banana function 的 最 优点 为 [1,，1] ， 函 数 对 应 的 最 小 值 为 0。 
函数 的 MATLAB 表达 式 为 : 


function f= BanaFun(x) 
f=100*(x(2) -x(1)2)2+(1-x(1))2; 
函数 图 像 在 [ -2, 2] x [ -1，-3] 上 的 图 像 为 三 维 图 , 如 图 6-1 所 示 。 
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图像 用 的 MATLAB 程序 为 : 
axis o 任 ; 
X= -2:.2:2; 
y= -1:.2:3; 
[xx,y7] = meshgrid(x,y); 
z2=100*(97 -zx 2).2+(1-xx). 2 
surfc( xx,yy,zz) ;( 三维 图 ) 
或 者 
surface(x,y,zz,,EdgeColor',[.8 .8.8]);( 信 视图) 


6.1 最 优 性 条 件 


1. 极 小 点 的 一 阶 必要 条 件 

设 Fzr) :R" 一 R 为 连续 可 微 函 数 , 如 果 z" 为 局 部 极 小 点 , 则 z "为 驻 点 ,， 即 梯 
度 Yf(xz") =0。 

2. 极 小 点 的 二 阶 必 要 条 件 

设 几 zx) :R" 一 R 为 二 次 连续 可 微 函 数 ,， 如果 "为 局 部 极 小 点 ， 则 * " 为 驻 点 ， 
即 梯度 VF(z " ) =0, 二 阶 Hesse 阵 了 Kxz") 半 正定 。 

3. 极 小 点 的 二 阶 充 分 条 件 

设 几 rz) :R" 一 R 为 二 次 连续 可 微 卫 数 ,如 果 梯 度 Vf(z" ) =0, 二 阶 Hesse 阵 
Vxz") 正 定 , 则 zx" 为 F 的 局 部 极 小 点 , z "ERR。 

以 上 三 个 定理 为 搜索 最 优点 以 及 判断 一 个 点 是 否 为 最 优点 的 基本 依据 。 经 典 
的 优化 算法 的 停止 条 件 为 YKz" ) =0, 例如 在 程序 中 外 Yf(z")1‖<1 x10， 即 
在 导数 范 数 小 于 某 特 定 误差 限时 停止 。 误 差 限 较 大 , 则 算法 迭代 次 数 减少 , 计算 
时 间 缩 短 , 但 是 解 的 质量 降低 ; 误差 限 较 小 , 则 算法 和 迭代 次 数 增加 , 计算 时 间 增 
长 , 但 是 解 的 质量 提高 ; 误差 限 一 般 为 1 x10 一 , 可 以 根据 实际 情况 设 定 合适 的 误 
差 限 。 当 然 , 还 有 极 小 点 的 二 阶 必要 与 极 小 点 的 二 阶 充分 条 件 , 对 VFxz-*) 的 判 
定 , 由 于 目标 函数 比较 复杂 , 二 阶 导数 矩阵 的 计算 量 极 大 ,所 以 一 般 算法 都 在 选 
代 过 程 中 对 V2F(x' ) 进行 修正 ， 得 到 V21(xt ) ,在 修正 过 程 中 始终 保持 
VF(z ") 的 正定 性 ,以 此 方法 解决 极 小 点 的 二 阶 条 件 问题 。 
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6.2 最 速 下 降 法 


6.2.1 算法 原理 


最 速 下 降 法 是 早期 的 优化 算法 , 其 理论 根据 函数 的 一 阶 泰勒 展开 : 
由 Hz+ad) =Fz) +aVrr)zd+olalldl) 
得 到 Kz+ad) -Kxz)=aVhz) da+o(alldll) 
根据 下 降 要 求 Kz +oad) -7xz)<0 
故 aVvf(xz)rda+olalldl) <9 
实际 中 要 求 a VFz)TId<0 

根据 上 式 选 取 合适 的 4, 得 a VF(z) da<0。 最速 下 降 法 取 d= - VYf(z)。 由 
于 近似 地 有 : 

Jrz+ad) -ATY) =aw VFxz)TId 
取 d4= - VYKz), 则 
rz+ad) -Frz)= -aaVFrz) VAz) 
由 VKz) ”VFxz)=0 知 : 
-aVRxz)rVAr)<0 

最 速 下降 法 有 全 局 收敛 性 ， 并 且 是 线性 收敛 的 ， 算 法 比较 简单 。 一 般 来 说 ， 
在 实际 计算 中 ， 最 速 下降 法 在 开始 迭代 时 效果 较 好 ， 有 时 能 很 快 地 达到 最 优 解 的 
附近 ， 但 是 当 继续 和 迭代 时 ， 常 常 发 生 扭 摆 现 象 ， 以 致 不 能 达到 最 优 解 ， 如 图 6-2 
所 示 。 


xO 


6.2.2 算法 步 又 


给 定 控制 误差 e >0。 

步骤 1: 取 初 始点 zx , 令 上 =0。 

步 对 2: 计算 8 = Vf(xz”)。 

步骤 3: 若 |g 和 <e, 则 zx”=x' ,停止 计算 ; 否则 , 令 p0 = -8 ,由 一 
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维 搜索 步 长 wk， 使 得 
zt +aipt) = migf(zr0 +ap 外 ) 
步 对 4; 令 x0r0 =x00 +aip ,大 = 下 +1, 转 步 又 2。 
MATILAB 实现 最 速 下 降 法 的 函数 为 fmininc，fminune 王 数 是 MATLAB 求解 无 
约束 优化 问题 的 主要 函数 ， 最 速 下 降 法 仅仅 是 ftminunec 函数 所 使 用 的 算法 之 一 。 
语法 ; 
x=fminunc(fun,x0) 
x=fminunc(fun,x0 ,options》) 
[x,fval] =fminunc(...) 
[x,fval,exitflag] = fminunc(...) 
[x,fval,exitlag,output] =fminunc(...) 
[x,fval,exittlag ,output ,grad] = fminunc(...) 
[x,fval,exitflag ,output ,grad ,hessian ] =fiminunc(...) 
输入 参数 : 
Fun: 目标 函数 , 一 般 用 M 文件 形式 给 出 
X0: 优化 算法 初始 选 代 点 
Options: 参数 设置 
函数 输出 
X: 最 优点 输出 (或 最 后 和 代 点 ) 
Fval: 最 优点 (或 最 后 选 代 点 ) 对 应 的 函数 值 
Exitflag: 函数 结束 信息 (具体 参见 MATLAB Help) 
Output: 函数 基本 信息 , 包括 迭代 次 数 、 目 标 函 数 最 大 计算 次 数 、 使 用 的 算法 
名 称 、 计 算 规模 
Grad: 最 优点 (或 最 后 迭代 点 ) 的 导数 
Hessian: 最 优点 (或 最 后 选 代 点 ) 的 二 阶 导 数 


6.2.3 程序 示例 


MATLAB 函数 的 使 用 方法 : 

1， 目标 函数 程序 BanaFun. m 与 BanaFunWithGrad. m 

function f= BanaFun(x) 〈 不 含 导 数 解析 式 ) 

f=100*(x(2) -x(1)2)2+(1-x(1))22; 

function [f,g] = BanaFunWithGrad(x) ( 含 导 数 解析 式 ) 

f=100*(x(2) -xf(l)2)2+(1-x(1))22; 

g=f[100*(4*x(1)3 -4*x(i)wvx2))+2xli) -2;100*(2*x(2) -2 
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本 X(1) 2)]; 
2. 参数 设置 (steepdesc. mn) 
OPTIONS = optimset('LargeScale ',, off', HessUpdate '， steepdesc '，gradobj ,on '， 
MaxFunEvals',250,' display '，iter ') ; 


具体 参看 附录 Optimization option 参数 设置 。 

'LargeScale '，off， 大 规模 计算 模式 ”关闭 

'HessUpdate ', steepdesc， Hess 阵 修正 方式 ,采用 最 速 下 降 法 (不 需要 修正 ) 
"gradobj'，on 目标 函数 导数 解析 式 , on 使 用 , of 不 使 用 (差分 导数 ) 
'MaxFunEvals ',250 最 大 目标 函数 计算 次 数 ,，250 次 

'display '， iter' 显示 迭代 过 程 


3. 函 教 计算 (steepdesc. m) 

x=[ -1.9,2]; 初始 迭代 点 

[x,fval,exitflag,output] =fminunc(@ BanaFunWithGrad,x,OPTIONS) 
计算 结果 : 


迭代 次 数 ”函数 计算 次 数 本 数 值 步 长 一 阶 导数 最 优 性 
First-order optimality 
JIteration Func-count f(x) Step-size 
0 1 267. 62 1. 23e +003 
1 2 214. 416 ”0. 000813405 519 
2 9 5. 83639 0. 00098493 13.4 
3 15 5.78292 。 0. 000567305 1.58 
4 18 5.73127 0. 0387979 12.9 
5 24 5. 68023 0. 000583736 1.59 
6 27 5. 63081 0. 0367599 12.5 
7 33 5.5819 ”0. 000600291 1.6 
8 36 5. 53444 0. 0349482 12.1 
9 42 5. 48743 ”0. 000617009 1.61 
10 45 5.44173 0. 0333245 Ti 
11 51 5. 39641 。 0. 000633925 1.62 
12 54 5. 35228 0. 0318587 Te3 
13 60 5. 30849 ”0. 000651074 1.63 
50 225 4. 01396 0. 0175609 7.3 
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51 231 3. 98427 0. 00106284 1.8 
52 234 3. 95495 0. 0171458 7. 16 
33 240 3. 92561 0. 00108886 1.8 
54 243 3. 89441 0. 0181085 7.29 . 
55 249 3. 86321 0. 00111764 1. 82 


Maximum number of function evaluations exceeded; 达到 最 大 的 函数 值 计 算 次 数 。 
increase options, MaxFunEvals ”建议 增加 最 大 的 函数 值 计算 次 数 。 
x= -0.9634 ”0.9372 
fval =3. 8632 
exitlag =0 《Number of iterations exceeded options. MaxIter or number of function e- 
valuations exceeded options. FunEvals. ) 
output = 
iterations:， 56 
funcCount: 250 
stepsize: 0. 0011 
firstorderopt: 1. 8155 
algorithm : ' medium-scale: Quasi-Newton line search， 
message: [ 1x78 char] 
从 结果 可 见 , 在 250 次 最 大 的 目标 函数 计算 次 数 内 ,算法 没有 到 最 优点 [1， 
1]。 
将 最 大 目标 函数 计算 次 数 调 高 到 2500 次 , 则 
OPTIONS = 
optimset(' LargeScale ',,，o 任 ',， HessUpdate ', steepdesc ', gradobj ',' on ',, MaxFunEvals 
2500) ; 
x=[-1.9,2]; 
{x,fval,exittlag ,output] = fminunc(@ BanaFunWithGrad ,x,OPTIONS》 
计算 结果 : 
Maximum number of iterations exceeded; 达到 最 大 迭代 次 数 
increase options. MaxIter， 建议 增加 最 大 闪 代 次 数 
X = 
.0.9770 0.9542 
fval =5.3808e -004 
exitflag =0 
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outpitit = 
iterations ; 401 
funcCount: 1462 
stepsize . 0. 0142 
firstorderopt: 0. 0574 
algorithm : ' medium-scale : Quasi-Newton line search， 
message; [1x67 char] 
从 以 上 两 个 算法 的 结果 可 以 看 出 ,最速 下 降 法 对 bana 本 数 不 是 十 分 有 效 。 
当 目标 函数 不 可 微 或 者 导数 求解 复杂 时 ,可 以 无 需 提供 目标 函数 的 导 函 数 的 
解析 形式 ，MATLAB 可 以 使 用 差分 的 方法 求 导 (下 降 方向 )， 对 应 的 代码 为 : 
OPTIONS = optimset(' LargeScale', o 人 ',, HessUpdate ', steepdesc ',,, MaxFunFEvals',250) ; 
x=[-1.9,2]; 
[x,fval ,exitlag ,output] = fminunc( @ BanaFun ,x,OPTIONS) 
计算 结果 : 
Maximum number of function evaluations exceeded ; 
increase options. MaxFunEvals 


X= 一 1.2553 1. 3640 

fval = 35. 1002 

exitflag = 0 

output = 
iterations : 19 
funcCount: 252 
stepsize:; 0. 0282 


firstorderopt: 10. 4149 
algorithm: ' medium-scale: Quasi-Newton line search， 
message: [ 1x78 char] 
从 计算 结果 上 可 以 明显 看 出 ， 对 于 最 速 下 降 法 ， 有 导数 解析 式 会 比 没有 导数 
解析 式 时 ， 计 算 质量 会 有 所 提高 。 


6.3 牛顿 算法 


6.3.1 算法 原理 
牛顿 算法 的 基本 思想 是 利用 二 次 函数 近似 目标 函数 ， 比 最 速 下 降 法 的 一 次 函 
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数 更 进 了 一 步 , 将 次 二 次 函数 的 极 小 点 作为 新 的 迭代 点 。 
设 几 xz) 二 次 连续 可 微 ,求解 无 约束 问题 
min 拨 立 ) 
户 R 一 及 
若 已 求 得 解 xz" 的 一 个 近似 点 x' ,对 xz'%” +5) 的 泰勒 展开 式 取 前 三 项 , 得 
到 


g 风 (8s) = ) + V(zb)r+mr Ver )s 


其 中 , s=z -xz ,9g(8) 为 Frz) 在 xt9 点 附近 的 二 次 近似 。 
设 到 Kx ) 正 定 , g 避 (xz) 有 唯一 极 小 点 , 也 是 驻 点 , 使 得 
=VKzo)+ wz)s=0 
得 = -[ ER VCze ) 

取 (t+1) 二 郑 ( 避 Et 二 天性 ) -[ (zto)]- = vrtzo) 
由 于 xf =x0 -[ 只 KRKzo)] VKze ) 中 求 矩阵 道 计算 复杂 , 可 以 通过 解 方程 
Hz )8(9 二 志 VAFzto ) 

求解 sb 。 


6.3.2 算法 步骤 


给 定 控制 误差 吾 >0。 

步 紧 1: 取 初 始点 xf , 令 大 =0。 

步骤 2: 计算 YKzw ) ，VKz )。 

解 mx)s = - VCzG) 

得 解 加 天 (+ 二 划 +S 司 。 

步骤 3: 若 |s@9 | <s, 则 停机 , zx”=xet ; 否则 大 = 下 +1， 转 步 又 2。. 

牛顿 算法 收敛 速度 为 二 阶 ， 是 其 最 大 的 优点 。 牛 顿 算法 对 正定 二 次 函数 一 步 
和 迭代 即 达 最 优 解 ， 因 此 具有 二 次 终结 性 。 


6.3.3 算法 特点 


牛顿 算法 有 一 些 致 命 的 缺点 ， 常 导致 方法 进行 中 产生 困难 ， 甚 至 失败 。 

(1) 牛顿 算法 是 局 部 收敛 的 。 当 初始 点 选择 不 当时 ， 往 往 导致 算法 不 收 
伍 。 

(2) 牛顿 算法 不 是 下 降 算法 ， 当 二 阶 Hesse 阵 非 正定 时 ， 不 能 保证 产生 的 方 
向 是 下 降 方向 。 

(3) 二 阶 Hesse 阵 YXx) 必 须 可 道 ， 否则 算法 进行 困难 。 
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(4) 对 函数 要 求 苛 刻 〈 二 阶 可 徽 ，Hesse 阵 可 拟 ) ， 运 算 量 巨大 。 

由 于 牛顿 算法 的 收敛 速度 快 ， 人 们 想 尽 办 法 去 克服 牛顿 算法 的 上 述 致 命 缺 
点 。 方 法 有 : 

(1) 减 小 计算 量 的 直接 修正 。 

(2) 带 一 维 搜索 的 牛顿 算法 。 

(3) Goldstein-price (1967) 方法 。 

(4) 强迫 Hesse 矩阵 正定 的 方法 。 

在 这 个 改进 牛顿 算法 的 过 程 中 ， 又 产生 了 各 种 各 样 的 有 效 算法 ， 如 拟 牛 顿 算 
法 ( 变 尺 度 法 ) 、L-M 算法 等 ， 其 中 拟 牛 顿 算法 〈 变 尺度 法 ) 的 出 现 有 效 地 丈 补 
了 和 牛顿 算法 的 各 种 缺陷 。 


6.4 拟 牛 顿 算法 〈 变 扩 度 法 ) 


在 对 牛顿 算法 的 改进 中 ， 拟 牛顿 算法 诞生 了 ， 直 到 现在 该 算法 还 被 公认 为 是 
求解 无 约束 优化 问题 的 最 有 效 的 算法 。 


6.4.1 算法 原理 


拟 牛 顿 算 法 对 牛顿 算法 有 两 个 重要 的 改进 : 一 是 选用 对 称 正 定 矩阵 可 以 对 搜 
索 方 向 保证 下 降 性 质 ; 二 是 改进 变 尺 度 矩阵 ， 通 过 逐步 迭代 修正 产生 ， 从 而 避 开 
逐 点 计算 二 阶 偏 导数 的 大 量 计算 。 

Hesse 阵 的 修正 方法 有 多 种 ， 这 里 主要 介绍 具有 代表 性 的 两 种 方法 : DFP 法 
与 BFCS 法 。 

设 so = -0 0 =87 -8 ,其 中 g(k) 为 目标 函数 放 z) 在 x'9 点 
处 的 梯度 量 , 则 DFP 修正 公式 为 : 

《二 ) (7 再 各 8(8(DT 


人 
再 (trD = 下 (0 _ 三 3 本 
(7 的 078 (9 


BFGS 修正 公式 可 由 DFP 修正 公式 加 上 下 列 修正 项 的 乘积 ww 


四 再 (0y(b 
2 
姥 介 = (了 CT 本 (0 )2 0 | 
6.4.2 算法 步骤 
拟 牛 顿 算法 的 具体 步骤 如 下 : 


步骤 1: 给 定 初始 点 zx"、 初 始 矩阵 百 ”" (通常 取 单 位 阵 ), 计算 8 , 令 大 =0。 
步骤 2:; 令 pt = -再 (08 虽 。 
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步 对 3: 由 一 维 搜索 (精确 或 不 精确 ) 确定 步 长 mr。 
9 +aipt ) =migfr +oap 忆 ) 

步 对 4: 令 xtr0 =xz0 +aup。 8 

步骤 5: 若 1g4i0 ‖ <e， 则 ”=xt 停 ; 否则 令 


(t+rD _ ww( 昌 


8 =XCt+D 一 基 ( 寺 ， 隐 国 = 有 
步 最 6: 由 DFP 修正 公式 
而 (yy(DT87( 8(8CDT 


再 00 = 再 亿 一 一 一 天 一 一 一 一 一 十 二 一 
(DT 再 (5y( 及 ) 8( 昌 


有 


或 由 BFGS 修正 公式 


《上 ) 再 4 (着 ) 
中 7 (DTzy( 间 (UV21 有 8 
(人 = (了 再 9) 柯 ] 


外 TS 一 (有 下 末代 
(TS 人 9 3 (9 





(k) ，() (7 再 (9 生 天 ) 了 
和 2 所 妈 放 本 at 1 ( 昌 (DT 
殖 = 下 “- + 一 NT 士 W 了 W 
(DT 人 了 加 


得 到 百 (0 。 令 不 =k+1 转 步 又 2。 
6.4.3 ”算法 性 质 


DFP 与 BFGCS 算法 的 重要 性 质 有 : 

(1) 对 正定 二 次 函数 ， 精 确 一 维 搜索 有 二 次 终结 性 ， 且 对 任意 初始 对 称 和 矩阵 
五 (有 再 ("+1 =G-!。 

(2) 在 (1) 的 前 提 下 ， 和 迭代 变量 满足 拟 牛 顿 方程 。 

(3) 在 (1) 的 前 提 下 算法 产生 共 配 的 方向 ， 当 吾 ' = 时， 产生 的 梯度 相 
互 共 瑟 。 

_ 对 一 般 函 数 还 具有 以 下 性 质 ; 

(1) 在 一 般 条 件 下 ， 算 法 保持 豆 % 的 对 称 正 定 ， 故 有 下 降 性 质 。 

(2) 选 代步 的 计算 量 (和 腰 法 ) 为 3w” +o(n)。 

(3) 在 一 定 条 件 下 超 线性 收敛 。 

(4) 对 于 严格 凸 函数 用 一 维 搜 索 ， 具 有 全 局 收敛 性 。 

除 上 述 DFP 法 与 -BFGS 法 的 共同 特点 外 ，BFGS 法 结合 Wole-Powell 不 精确 
一 维 搜索 ， 在 理论 上 得 到 全 局 收敛 性 ，DFP 法 至 今 没有 证 明 有 该 性 质 ,数值 实验 
进一步 验证 了 该 观点 。 总 体 上 来 说 BFCS 法 优 于 DFP 法 ， 是 至 今 “ 最 好 ”的 拟 
牛顿 算法 。 


6.4.4 程序 示例 
MATLAB 实现 拟 牛 顿 算法 的 画 数 为 fminunc。fminune 本 数 是 MATLAB 求解 
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无 约束 优化 问题 的 主要 函数 ， 拟 牛顿 算法 是 fminunc 函数 所 使 用 的 最 主要 方法 。 
有 关 FEminunec 的 语法 说 明 可 以 参看 6. 2 中 的 具体 说 明 。 
MATLAB 枉 数 的 使 用 方法 为 : 
(1) 目标 枉 数 程序 BanaFun. m 与 BanaFunWithGrad. m 
function f= BanaFun(x) (不 含 导数 解析 式 ) 
.f=100* (x(2) -x(1)2)2+(1-x(1))2; 
function [f,g] = BanaFunWithGrad(x) ( 含 导数 解析 式 ) 
f=100*(x(2) -~-x(1)2)2+(1-x(1))2; 
g=[100*(4*x(1)“3 -4*x(1)*x(2))+2*x(1) -2; 100*(2 阔 X(2) 一 
2*x(1)2)]; 
(2) 参数 设置 quasi _newton. m 
DFP( Davidon- 了 etcher-Powel ) 方 法 ; 
OPTIONS = optimset(' LargeScale ',,, o 作 ',,, HessUpdate ',,, dfp '，y gradobj on '， 
'" MaxFunEvals ',,250， InitialHessType '， identity ',," display'iter ') ; 
BFGCS( Broyden-Fletcher-Coldfarb-Shanno) 方 法 ; 
OPFTIONS = optimset(' LargeScale ',,' o 企 ', HessUpdate ',, bfgs', gradobj on ',， 
MaxFunEvals ',250, InitialHessType ',， identity ', display' iter ') ; 


具体 参看 附录 Optimization option 参数 设置 。 

'LargeScale ',' off， 大 规模 计算 模式 ”关闭 

'HessUpdate ',,' dfp， Hesse 阵 修正 方式 DFP 方法 修正 

'HessUpdate ',, bfgs， Hesse 阵 修 正方 式 bfgs 方法 修正 

'gradobj on: 目标 郴 数 导 数 解析 式 on 使 用 , off 不 使 用 (差分 导 
数 ) 

'MaxFunEvals ,250 最 大 目标 函数 计算 次 数 250 次 

"JIniialHessType ,identity' 初始 Hesse 阵 使 用 单位 阵 (对 和 角 元 素 为 1, 其 他 为 
0 的 矩阵 ) 

'display '，iter' 显示 和 迭代 过 程 

(3) 函数 计算 

1) DPF 方法 


OFTIONS = optimaset(' LargeScale ',o 企 ', HessUpdate ',,, dfp ,gradobj on '， 
"MaxFunEvals ',250,， InitialHessType ', identity ,display''iter)) ; 

x=[ -1.9,2]; 初始 迁 代 点 

[x,fval ,exitflag ,output] =fminunc(@ BanaFunWithGrad ,x,OPTIONS) 
计算 结果 为 : 


第 6 章 无 约束 优化 算法 97 
www 


Jirst-order 

JIteration Func-count fx) Step-size optimajity 
0 1 267. 62 1. 23e +003 
1 2 214. 416 ”0. 000813405 519 
2 7 1. 42724 0. 0227842 7. 46 
3 9 1. 24439 0. 168253 2. 48 
4 12 1. 06017 91 2. 14 
5 14 0. 957704 0. 31929 了 .37 
6 15 0. 948335 1 4.94 
7 16 0. 941972 1 5. 49 
41 60 0. 000712298 1 0. 399 
42 61 0. 000118493 1 0. 131 
43 62 6. 82877e -006 . 1 0. 0719 
44 63 8. 52203e -008 1 0. 00219 
45 64 1. 27563e - 009 1 0. 00115 


Optimization terminated :relative infinity-norm of gradient less than options. TolFun. 
和 一 1. 0000 1. 0000 
fval = 1. 2756e -009 
exitlag = 1 (正常 停止 达到 最 优 解 ) 
output = 
iterations ; 45 
funcCount: 64 
stepsize; 1 
firstorderopt: 0. 0011 
algorithm:'medium-scale ， Quasi-Newton Hine search， 
message: | 1x8S char] 
2) BFGS 方法 
OPTIONS = optimset(' LargeScale ',,, off',,, HessUpdate '，， bfgs '，gradobj '， 
"on '，JnitialHessType ', identity ',,, MaxFunEvals ,250,， display ' ,iter'") ; 
x=[-1.9,2]; 
[x,fval ,exitflag ,output] =fminunc( @ BanaFunWithCrad ,x,OPTIONS ) 
计算 结果 为 : 
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First-order 

Iteration Func-count fx) Step-size optimality 
0 刘 澳 267. 62 1.23e +003 
1 2 214. 416 ”0. 000813405S 5S19 
2 7 1. 42881 0. 0226339 天 全 
3 9 1. 24422 0. 168155 2. 48 
4 12 1. 0$985 91 2. 14 
导 14 0. 924515 0. 3$2138 7. 59 
6 15 0. 769915 1 2. 89 
7 16 0. 587502 1 6.08 
8 17 0. 449275 1 1. 59 
22 34 4. 97449e -006 1 0. 0607 
23 35 1. 1747e -~ 008 1 0. 000357 


Optimization terminated : relative infinity-norm of gradient less 外 an options, TolFun. 
X = 0. 9999 0. 9998 
fval= 1.1747e -008 
exitflag = 1 
output = 

iterations; 23 

funcCount: 35 

stepsize: 1 

firstorderopt: 3. S5671e - 004 

algorithm:;' medium-scale: Quasi-Newton jine search 

message: [1x85 char] 

两 种 算法 比较 : BFCS 法 其 迭代 次 数 、 目 标 函 数 的 计算 次 数 都 小 于 DFP 法 ， 

相 比较 而 言 BFGS 法 在 bana 本 数 上 效果 优 于 DFP 法 。 


6.5 单纯 形 法 


直接 算法 可 以 归 为 经 验方 法 ， 一 般 来 说 不 如 前 面 讨论 的 算法 有 效 。 尽 管 如 
此 ， 由 于 它们 基本 原则 的 简明 性 ， 某 些 技术 的 实用 性 ， 对 于 处 理 某 类 问题 仍 有 实 
际 意义 ， 对 于 算法 的 发 展 也 有 着 重要 作用 。 
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单纯 形 法 (Nelder-Mead Simplex) 是 直接 算法 中 最 常用 的 一 种 。 单 纯 形 法 是 
利用 变换 单纯 形 来 求 到 极 小 点 的 方法 ， 是 由 Spendley，Hext，HimsWorth (1962 ) 
提出 的 ，1964 年 Nelder，Mead 提出 了 改进 的 可 变 多 面体 算法 。 


6.5S.1 算法 原理 


单纯 形 法 的 基本 思想 是 : 
设 x@o , xz ， …,xo 是 六 中 的 n+1 个 点 ,构成 一 个 当前 的 单纯 形 ，x。.-， 
Yun 定义 如 下 
(zu) =maxiFzw)， HKzO)， ze ) 
zs) =mint 几 zz) 7zo 7zO)} 
记 x 为 这 个 单纯 形 除去 x。 外 的 所 有 顶点 的 形 心 ， 


取 x。. 关 于 zx 的 反射 点 ze ,xeo*0 =z+(z -xu) 构 成 新 的 单纯 形 ,反复 
上 述 过 程 , 直到 达到 停止 条 件 。 
算法 的 几何 描述 如 图 6-3 所 示 。 





图 6-3 


可 变 多 面体 算法 的 具体 步骤 这 里 不 再 详细 说 明 。 
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6.5.2 函数 Fminsearch 


fminsearch 是 MATLAB 中 求解 无 约束 的 函数 之 一 ， 其 使 用 的 算法 为 可 变 多 面 
体 算法 。 

1， 函 教 语法 

X=fminsearch(fun,x0) 

X=fminsearch(fun,x0,options) 

[x,fval] =fminsearch(...) 

[x,fval,exittlag] = fminsearch(...) 

[x,fval,exittlag,output] = fminsearch(...) 

本 数 输入 ; 

Fun: 目标 函数 

X0 : 和 迭代 初始 点 

Options : 函数 参数 设置 

2、 函 孝 栓 出 

X; 最 优点 (算法 停止 点 ) 

Fval: 最 优点 对 应 的 函数 值 

Exitlag: 函数 停止 信息 

1: 函数 收敛 正常 停止 

0: 迭代 次 数 ,目标 函数 计算 次 数 达 到 最 大 数 

-1: 算法 被 输出 函数 停止 (output) 

Output: 天 数 运算 信息 

3. 函数 使 用 

(1) 目标 函数 程序 BanaFun. m 

fnction f= BanaFun(x) 

f=100*(x(2) -x(1)2)2+(1-x(1))22; 

Nelder-Mead Simplex 函数 不 需要 导数 信息 。 

(2) 算法 参数 设置 : simplexUnc. m 

OPTIONS = optimset(' LargeScale ', o 任 ',,, gradobj ',,, o 任 ',, MaxFunEvals',250 ,dis- 
play ','iter ') ; 

(3) 函数 调用 运算 :simplexUnc. m 

OPTIONS = optimset(' LargeScale ',，o 任 ', gradobj ',' on ',' MaxFunEvals 1 ,250 ,' dis- 
play' iter ') ; . 

x=[-1.9,2]; 

[x,fval,exitflag ,output] = fminsearch(@ BanaFun ,x,OPTIONS) 
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4. 计算 结果 
teration Func-count min f(x) Procedure 
0 1 267. 62 
1 3 236. 42 initial simplex 
2 5 67. 2672 expand 
3 7 12.2776 expand 
人 8 12. 2776 reflect 
5 10 12.2776 contract inside 
6 2 6. 76772 contract inside 
有 13 6. 76772 reflect 
110 203 1. 8682Se -009 contract inside 
111 205 1. 86825Se -009 contract outside 
112 207 5. 53435e -010 contract insgide 
113 208 5.53435e -010 reflect 
114 210 4. 0685Se -010 contract inside 
Optimization terminated ; 


the current x satisfies the termination criteria using OPTIONS. TolX of 1. 000000e-004 
and 下 (X) satisfies the convergence criteria using OPIIONS. TolFun of 1. 000000e-004 
X = 1. 0000 1. 0000 
fval = 4.0686e -010 
exitflag = 1 
output = 

iterations : 114 

funcCount: 210 

algorithm :' Nelder-Mead simplex direct search ' 

message: [ 1x196 char] 


6.6 含 参数 的 优化 问题 


在 实际 问题 中 ， 优 化 常常 是 在 一 定 参 数 给 定 的 情况 下 对 变量 函数 进行 优化 ， 
有 时 这 种 含 参数 的 优化 问题 还 会 在 其 他 算法 的 移 代 过 程 中 出 现 ， 例 如 一 般 约 束 算 
法 中 都 会 有 以 无 约束 算法 为 单元 的 迭代 过 程 。 例 如 : 


702 运筹 学 与 最 优化 MATLAB 编程 


min 成 x,a) =Gi 和 二 oa 和 
只 有 在 参数 a 给 定 的 条 件 下 才能 计算 函数 妃 x,a) 的 最 小 点 。 
Matlab 函数 的 使 用 方法 为 : 
(1) 目标 函数 程序 
function f= ObjFunWithPara(x,a) 
f=a(1)*sin(x(1))+a(2)*x(2)2; 
(2) 函数 调用 。 在 天 数 示例 中 , 不 再 设置 算法 参数 , 各 个 算法 函数 均 使 用 默 
认 , 可 以 参看 附录 Optimization option,Fminune 的 默认 方法 为 BFGS。 
1) 本 数 Fminunc 
a=[1,1]; 鲍 参 数 给 定 
x0=[0,0]j; 鲍 迭代 初始 点 
[x,fval ,exitflag ,output] = fiminunc(@(x) ObjFunWithPara(x,a) ,x0) 
计算 结果 为 : 
Optimization terminated : relative infinity-norm of gradient less than options. TolFun, 
Xx = 一 1.5708 0. 0000 
fval = -1.0000 
exitlag= 1 
outpnut = 
iterations : 4 
funcCount: 18 
stepsize: 1 
firstorderopt: 1. 9744e -- 006 
algorithm :' medium-scale: Quasi-Newton line search 
message; [1x85 char] 
2) 本 数 Fminsearch 
a=[1,1]; 
xx=[0,0]; 
[x,fval ,exittlag ,output] = fminsearch(@ (x) ObjFunWithPara(x,a) ,x0) 
计算 结果 为 : 
X = 一 1.5708 0. 0000 
fval = -1.0000 
exitflag = 1 
output = 
iterations: 61 
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60. 7 


术 。 


funcCount: 113 
algorithm:' Nelder-Mead simplex direct search 
message: [1x196 char] 


大 规模 无 约束 优化 问题 


在 计算 大 规模 的 无 约束 问题 时 ， 都 会 对 原 有 算法 采用 一 些 有 效 的 数值 处 理 技 
由 于 该 类 数值 计算 比较 复杂 ， 这 里 不 再 详 述 ， 以 下 仅 介 绍 具 体 的 使 用 方法 。 
1. 测试 函 教 
200 2 
miar = 王 (zGD - 十 ) 

大 规模 算法 使 用 的 方法 主要 是 OPTIONS = optimset(' LargeScale', on ') 。 
'LargeScale ',, on ': 为 算法 函数 开启 大 规模 计算 功能 。 
2，Rminune 函 教 的 使 用 
(1) 目标 函数 程序 :LargObjFun. m 
function f = LargObjFun(x) 
f=0; 
for i=1l:200 

f=f+(x(i) -17i)22; 
end 
(2) 王 数 调用 largUnc, m 
x0 =10 * ones(1,200) (初始 迭代 点 ) 
PTIONS = optimset(' LargeScale','on', display''iter',' TolFun' le-8); 
[x,fval ,exittlag ,output] = fminunc( @ LargObjFun ,x0 ,PTIONS) 
计算 结果 为 ; 


Jteration Func-count fxy) Step-size optimality 
0 201 19884. 1 20 
1 402 16104. 3 0. 050025 18 
2 603 6. 31478e -007 1 0. 000287 
3 804 1. 11396e -014 1 8. 9e-010 


Optimization terminated : relative infinity-norm of gradient less than options. TolFun. 


基 三 


Columns 1 through 9 
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1.0000 ”0.5000 0.3333 ”0.2500 ”0.2000 ”0.1667 
0. 1250 ”0.1111 


Columns 190 through 198 
0. 0053 “0.0052 ”0.0052 “0.005$2 ”0.0052 “0.0051 
0. 0051 “0. 0051 
Columns 199 through 200 
0. 0050 “0. 0050 
fval =1. 1140e -014 
exitflag = 1 
output = 
iterations: 3 
funcCount: 804 
stepsize : 1 
firstorderopt: 8. 8988e - 010 
algorithm :' medium-scale; Quasi-Newton line search， 
message; [1x85 char] 


0. 1429 


0. 0051 


第 7 章 “约束 优化 算法 


约 东 优化 问题 是 人 们 在 日 常生 活 中 遇 到 最 多 的 数学 问题 。 一 般 的 约束 优化 问 
题 的 求解 难度 很 大 , 目前 还 没有 一 种 普遍 有 效 的 方法 。 本 章 介 绍 一 般 约 束 问题 的 
经 典 算法 。 由 于 算法 的 复杂 性 ,文中 只 介绍 基本 解法 ,然后 对 MATLAB 求解 约束 
优化 的 函数 进行 详细 的 介绍 。 


约束 优化 问题 的 标准 形式 为 ; 
min 成 z) , 工 E 及 ” 
st BEgi(z)<0,1=1, 2，…，m 
in(z) =0,J=1,2，…，1! 
其 中 必 Si， 请: 有 R 一 有 


约束 优化 算法 的 基本 思想 是 : 通过 引 人 效 用 函数 的 方法 将 约束 优化 问题 转换 
成 无 约束 问题 ， 再 利用 优化 迭代 过 程 不 断 地 更 新 效用 函数 ， 以 使 得 算法 收敛 。 本 
章 中 的 无 约束 算法 主要 介绍 的 是 内 点 罚 函 数 法 和 拉 格 朗 日 乘 子 法 ， 其 中 拉 格 朗 日 
乘 子 法 是 在 一 般 的 罚 函 数 法 的 基础 上 建立 起 来 的 。 它 引信 了 拉 格 朗 日 乘 子 ， 成 功 
地 解决 了 原 罚 函数 法 增 广 目标 函数 的 病态 性 ， 即 原 罚 因子 趋向 无 穷 大 (或 零 ) 
的 病态 性 质 。 


7.1 罚 郴 数 法 〈 内 点 法 ) 


罚 函 数 法 (内 点 法 ) 的 主要 思想 是 : 在 可 行 域 的 边界 上 筑 起 一 道 很 高 的 
“围墙 ” ， 当 迭代 点 靠近 边界 时 ， 目 标 函 数 陡然 增 大 ， 以 示 惩 罚 ， 阻 止 迭 代 点 穿 
越 边界 ， 这 样 就 可 以 将 最 优 解 “ 挡 ” 在 可 行 域 之 内 了 。 

它 只 适用 于 不 等 式 约束 : 

min 九天 ) , ER 
st &i(Z) 三 0,=1, 2，…， 隐 
它 的 可 行 域 为 
。 了 =izreR'lgi(z)<0,I=1,2，…，7mj 
对 上 述 约束 问题 , 县 其 可 行 域 的 内 点 可 行 集 开关 引 的 情况 下 , 引入 效用 函数 : 


minB(xr, r) = 护 z) +r 启 (r) 
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其 中 记 z) = > - 1 一 xy 或 记 z) = lln(-&i(z) | 。 


算法 的 具体 步 又 如 下 : 

给 定 控制 误差 es >0, 惩罚 因子 的 缩小 系数 0<c<1。 

步 野 1: 令 j =1, 选 定 初始 点 xz e Do, 给 定 m >0( 一 般 取 10) 。 
步 野 2: 以 zx 为 初始 点 , 求解 无 约束 


minB(x，r) = 成 z) + 产 疡 (zx) 
其 中 记 z) = > - 二 2 或 记 z) = > |ln(-&i(z)) | ,得 最 优 解 z =z(rm)。 


步骤 3: 若 m 1 <eE， 则 zx(” 为 其 近似 最 优 解 , 停 ; 否则 , 令 m =cri, 上 = 
丰 +1， 转 步骤 2 


7.2 拉 格 朗 日 乘 子 法 


这 里 介绍 拉 格 朗 日 乘 子 法 处 理 不 等 式 约束 的 两 种 方法 及 其 比较 , 并 引 人 和 人 经典 
的 松弛 变量 方法 。 
1 PH 算法 :( 约 教 为 等 式 的 情况 下 ) 引入 
效用 郴 数 为 : 
minMf(xz，xtb ,ol) =7z) +&COT(z) +ai 瑚 (x) (天 ) 
判断 函数 为 : 
惫 = 站 (ze ) 
当 和 = 由 (xz ) <e 时 迭代 停止。 
步骤 1: 选 定 初始 点 xo , 初始 拉 格 朗 日 乘 子 向 量 wo , 初始 罚 因子 ec 及 其 
放大 系数 ec >1, 控制 误差 s >0 与 常数 ge(0, 1) , 令 丰 =1。 
步 叉 2: 以 xf47 为 初始 点 , 求解 无 约束 问题 
min 内 (zx ，ol) = 成 z) +T 丰 (天 ) +ari 正 ( 工 ) 天 (并 ) 
得 到 无 约束 问题 最 优 解 zx 。 
步骤 3: 当 | pz ) | <e 时 ,xz 为 所 求 的 最 优 解 ， 停 ; 否则 转 步 又 4。 
步骤 4: 当 ‖p(zee ) |x1A(ze ) | <8 时 , 转 步骤 5; 否则 令 cx, =cot， 转 步 
观 5。 
步 最 5: 令 ze =ut9 +oi(rt9 ) ,大 = 大 +1， 转 步骤 1。 
2、PHR 工法 (一 般 约 束 形式 的 松弛 变量 法 和 指数 形式 法 ) 
松弛 变量 法 为 ; 
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M(a,y,p) =z) + 击 它 | [max(0, +pgi(z)] 一 呈 | 


了 
十 放 世 且 ( 基 ) 十 > 和 () 
乘 子 的 修正 公式 为 : 


明 =g 介 +phi(zx'co ) ,了 =1， | 
2 =max[0， zi +PE(XC ) ] =1，…，m 


判断 函数 为 : 
di = { 旺 wo) + 袜 mex( -gxw)， 中 
当 只 = 中 (zx ) < 人 时 迭代 停止 。 


7.3 乘 子 法 MATLAB 程序 及 其 使 用 


7.3.1 Al_main 函数 


根据 上 述 7. 2 乘 子 法 利用 m 语言 编写 的 乘 子 法 示例 程序 如 下 
1. 程序 (1) ; 薪 子 法 效用 函数 程序 
隐 数 功能 : 将 约束 优化 问题 , 根据 效用 函数 方法 , 将 其 转变 成 无 约束 问题 。 
function f=AL_obj(x) 
拉 格 朗 日 增 广 琐 数 
%N _equ 等 式 约束 个 数 
%N _ inequ 不 等 式 约束 个 数 
global r _al pena N _equ N _inequ; 和 全 局 变量 
h _equ =0; 
h _inequ =0; 
[h,g] = constrains(x) ; 
% 等 式 约 束 部 分 ; 
fori=1;:N _equ 
h__equ=h_equ +h(i) *r_al(i) +(pena/2) * h(i),22; 
end 
多 不 等 式 约束 部 分 
fori=1:N _inequ 
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h _inequ =h _inequ +(0. S/pena) * (max(0,(r_al(i) + 
pena sg(i))).22-r_al(i).22); 
end 
%% 拉 格 朗 日 增 广 本 数值 
f=obj(x) +h_equ+h _inequ; 
2. 程序 (2) : 判断 函 教 
函数 功能 :判断 是 否 符合 约束 条 件 。 
和 纺 the compare function is the stop condition 
function f = compare(x) 
global r _al pena N _equ N _inequ; 
h _equ =0; 
h _inequ =0; 
[h,g] = constrains(x) ; 
多 等 式 部 分 
fori=1l:N __equ 
h _equ=h _equ+h(i).22; 
end 
鲍 不 等 式 部 分 
fori=1:N _inequ 
h _inequ =h __inequ+ (max( -g(il),r_al(i+N_equ)/pena)).2; 
end 
_ f=sqrt(h _equ +h_inequ); 
3. 程序 (3) : AL 算法 主 程序 
天 数 功能 : 对 无 约束 的 效用 函数 利用 拟 牛 顿 算法 求解 其 最 优 解 , 更 新 乘 子 。 
function [X,FVAL] =AL_main(x_alr_al,N _equ,N _inequ) 
% code by ariszheng 
% 上 Email， ariszheng@ gmail. com 
%% 本 程序 为 拉 格 朗 日 冬 子 法 示例 算法 
% 函数 输入 : 
% xx_al: 初始 和 迭代 点 
力 r_ 引 l: 初始 拉 格 朗 日 彩 子 
% ” N_equ: 等 式 约 束 个 数 
% N_inequ: 不 等 式 约 束 个 数 
% 郴 数 输出 : 
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%  X:， 最 优 函 数 点 
纺 FVAL: 最 优 函 数值 


Blobal r_al pena N _equ N _inequ; 和 % 参 数 (全 局 变量 ) 
pena =10; 和 惩罚 系数 

c __scale =2;% 乘法 系数 乘 数 ; 

cta =0. 5; 鲍 下降 标准 系数 

e_al =0.005;% 误差 控制 范围 

max _itera =25 ; 


out _itera =1;% 迁 代 次 数 


% ============-===-=- 算 法 送 代 开始 ==========-==--=-=-=--- 
while out _itera < max _ itera 

x_a0=x_ali 

T_a0=r_ ai 

色 判断 函数 

compareF]lag = compare(x _al0) ; 

多 无 约束 的 拟 牛顿 法 BFGS 


[X,FVAL] =fminunc(@AL_obj,x_al0); 
x_ 引 =X;% 得 到 新 迭代 点 
和 判断 停止 条 件 
让 compare(x _al) <e_ al 
disp(” we get the opt point:”) ; 
break 
end 
和 co 判断 是 数 下 降 度 
让 compare(x _al) < cta * compareFlag 
pena = pena;% 可 以 根据 需要 修改 惩罚 系数 变量 
else 
pena = min(1006 ，c _scale * pena) ;% % 乘法 系数 最 大 1000 ; 
disp( pena =2* pena" ); |， 
end 
免 % 更 新 拉 格 朗 日 乘 子 ; 
[h,g] = constrains(x _al) ; 
for i=1l:N __equ 
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%% 等 式 约束 部 分 ; 
r_al(i) =r_al(i) +penawh(i); 
end 
fori=l:N _inequ 
色色 不 等 式 约 束 部 分 ; 
r_al(i+N_equ)=max(0,(r_al(i+N_equ)+Ppena*g(i))); 
end 
out _jitera =out _itera +1l; 
end 
和 ++++ 十 二 二 十 十 十 二 十 十 十 二 十 二 二 十 + 二 和 迭代 结束 ++ 十 + 十 十 十 十 十 士 十 填 十 十 十 十 


disp( "the value of the obj function ” ) ; 
obj(x_al) 
disp( "the value of constrains ” ) ; 
compare(x__al) 
disp(“ the opt point ” ) ; 

X=x_ ali 

FVAL =obj(X); 


7.3.2， 乘 子 法 AL _main 函数 使 用 方法 
1. 定义 月 标 函 数 及 约束 函数 


min 所 xx) = 一 XIX2 一 和 2%3 一 和 3 区 
s.t Xi +%2 +X3 一 1 =0 
嫉 +% +%i -3<0 
目标 函数 m 文件 : (Augmented Lagrangian Algorithms 文件 夹 ) 
function f= obj(x) 
f= -xf1)*x(2) -x(2) *x(3) -~-x(3) *x(1); 
约束 函数 M 文件 : 
function [h,g] = constrains(x) 
h=x(1) +x(2) +x(3) -1;% 等 式 约束 
g=x(1)2+x(2)2 +x(3)2 -3;% 不 等 式 约束 
2、AL _main 函数 调用 
function [X,FVAL] =AL_main(x _alr_al,N_equ,N _inequ) 
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函数 输入 ; 
x_al: 初 始 迭 代 点 
r_al: 初 始 拉 格 谣 日 乘 子 
N _equ: ”等 式 约束 个 数 
N _inequ: 不等式 约束 个 数 
函数 输出 : 
X: 最 优 函数 点 
FVAL: 最 优 函 数值 
函数 调用 ; 
x_a=[1,1,I]; 初始 迁 代 点 
r_al=[1,1]; 初始 拉 格 朗 日 乘 子 
N _equ =1; 等 式 约 束 个 数 一 个 
N _inequ =1; 不等式 约束 个 数 一 个 
[X,FVAL] =AL_main(x_al,r_al,N_equ;N _inequ) 
计算 结果 : 
the opt point 
久 三 
0.3342 “0.3342 ”0.3342 
FVAL = 
-0. 3350 


7.4 FEFmincon 了 果 数 


Fmincon 是 MATLAB 最 主要 的 内 置 求解 约束 最 优化 的 函数 ， 改 函数 的 优化 问 

题 的 标准 形式 为 ; 

min 甩 节 ) 

stc(r) 达 0 

cedg(z) =0 

4 万 

4egx =6e9 

硬 三 xz 三 三 
这 里 x, 六 ，peg, 功 ,， 厂 为 向 量 ; 4 与 hey 为 矩阵 ; Kx) 为 目标 函数 ; ec(x) , ceg(z) 
为 非 线性 约束 ; 4r 大 5 ,4egx = eg 为 线性 约束 ; 西 和 zx< 码 为 可 行 解 的 区 间 约 束 。 
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Fmincon 函数 使 用 的 约束 优化 算法 都 是 目前 比较 适用 的 有 效 算法 ， 对 于 中 等 
的 约束 优化 问题 ，fmincon 使 用 序列 二 次 规划 (Sequential Quadratic Programming， 
SQP) 算法 ， 对 于 大 规模 约束 优化 问题 ，fmincon 使 用 基于 内 点 反射 牛顿 法 的 信 
赖 域 算法 (subspace trust region method and is based on the interior-reflective Newton 
method) ， 对 于 大 规模 的 线性 系统 ， 使 用 共 配 梯度 算法 〈Preconditioned Conjugate 
Gradients ，PCG) 。 由 于 这 些 算 法 都 具有 一 定 的 复杂 性 ， 具 体 算法 这 里 不 再 详 
述 。 
函数 语法 
x=fmincon(fun,x0,A,b) 
Xx=fmincon(fun,x0,A,b,Aeq,beq) 
x=fmincon(fon,x0,A,b,Aeq,beq, 了 hb,ub) 
x =fmincon(fun,x0,A,b,Aeq,beq,jb,ub,nonlcon) 
x=fmincon(fun,x0,A,b,Aeq,beq,lhb,ub ,nonlcon,options ) 
[x,fval] =fmincon(…) 
[x,fval ,exittlag] = fmincon(…) 
[x,fval ,exittlag ,output] =fmincon(…) 
[x,fval ,exitflag ,output,lambda] =fmincon( …) 
[x,fval ,exitftlag ,output,]ambda ,grad] =fmincon(…) 
[x,fval,exittlag ,output ,lambda ,grad ,hessian ] = fmincon(…) 
枉 数 输入 
Fun: 目标 函数 
X0: 初始 迭代 点 
A: 线性 不 等 约束 系数 矩阵 
B: 线性 不 等 式 约 束 的 常数 向 量 
Aeq: 线性 等 约束 系数 矩阵 
Beq: 线性 等 式 约 束 的 常数 向 量 
了 b: 可 行 区 域 下 届 
Ub: 可 行 区 域 上 界 
Nonlcon : 非 线性 约束 
Options: 优化 参数 设置 
函 数 输出 
X: 最 优点 (或 者 结束 和 迭代 点 ) 
Fval: 最 优点 (或 者 结束 选 代 点 对 应 的 函数 值 ) 
Exitflag: 迭代 停止 标识 
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Output: 算法 输出 (算法 计算 信息 等 ) 
Ambda: 拉 格 朗 日 乘 子 
Crad : 一 阶 导 数 向 量 
Hessian: 二 阶 导数 矩阵 
计算 示例 : 
使 用 具体 计算 示例 说 明 fmincon 的 具体 使 用 方法 , 在 示例 中 还 将 对 fmincon 的 
使 用 细节 加 以 说 明 。 


7.4.1 函数 示例 (1) 


人 = 一 %1X2%3 


) -xi -2x, -2x; <0 
0 三 xi +2x。 +2x3 三 72 


min 成 二 ) = 一 xx2X3 
上 +2x +2x3 三 72 
编写 目标 函数 M 文件 myfun1. m 
function f= myfunl(x) 
f= -~x(1) *x(2) *x(3); 
调用 fmincon 函数 M 文件 SolveMyfunl. m 
options = optimset( ”LargeScale” ，off" ，" display”, "iter ) ; 
% 参 数 设 置 使 用 中 等 规模 算法 ， 显 示 迭 代 过 程 
A=[ -1,-2, -2; % 线 性 不 等 式 约束 系数 卸 阵 
1,2,2]; 
b = [0;72];% 线 性 不 等 式 约束 常量 向 量 
x0 =[10,10,10] ;% 初 始 迭 代 点 
[x,fval,exittlag ,output,lambda ,grad ,hessian ] = 
fmincon( @ myfunl ,x0,A,b,[],[],[],[],[],options) 


计算 结果 为 : 
max Line search 。” Directional 。 First-order 

Iter 了 -count fx) constraint ”steplength derivative optimajity 

Procedure 
0 4 =- 1000 -22 

1 9 =-1587. 17 -11 0.5 642 584 
2 13 -3323. 25 0 1 -1.9e+003 161 
3 21 -3324. 69 0 0. 0625 146 S8.2 


Hessian modiftied 
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10 49 -3456 0 1 -0.000103 0. 0487 
11 53 -3456 0 ] -4.39e-007 0. 00247 
Optimization terminated ; magnitude of directional derivative in search 
direction less than 2 * options. TolFun and maximum constraint violation 
is less than options. TolCon.〈 说 明正 常 终止 ) 
Active inequajities (to within options. TolCon = le -006 ) : 
jower Upper ineqjin ineqnonlin 
2 
X=24. 0000 12. 0000 12. 0000 
fval = -3. 4560e +003 
exitflag = 5 
(下 降 方向 的 范 数 小 于 误差 控制 范围 ,正常 迭 代 停止 ， Magnitude of directional de- 
Tivative Was jess than the spec 砷 ed tolerance and constraint violation was less than op- 
tions, TolCon. ) 
output = 
iterations: 11 
funcCount: 53 
lssteplength: 1 
stepsize: 0. 0011 
(算法 中 等 规模 SQP 拟 牛顿 线性 搜索 ) 
algorithm: ”medium-scale: SQP，Quasi-Newton ，line-search'， 
firstorderopt: 4. 7583e - 004 
message:; [ 1x172 char] 
]ambda = 
lower: [3xl double] 
upper: [3xl double ] 
eqlin; [0xl double] 
eqnonjin: [0xl double] 
ineqlin， [2xl double] 
ineqnonlin: [0xl double] 
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-287. 9994 
-288. 0002 
hessian = 
3. 2718 -3.7384 -SS.0124 
-3. 7384 22. 6255 -S. 8906 
-5.0124 一 3. 8906 15. 0341 


7.4.2 函数 示例 (2) 


fmincon 函数 默认 的 求 导 方法 为 差分 求 导 方法 。 为 了 便于 更 精确 地 计算 以 及 
减少 计算 时 间 ， 可 以 提供 目标 函数 导数 。 以 下 还 是 以 函数 示例 (1) 的 优化 问题 
为 例 。 
编写 目标 函数 M 文件 myfun2. m 
function [f,g] = myfton2(x) 
f= -~-x(1)*x(2)*x(3); 
g=[ ~-x(2)*x(3); 

-X(CL1)*x(3); 

-x(1) *x(2)]; 
调用 fmincon 函数 M 文件 SolveMyfun2. m 
options = optimset( ”LargeScale” ，off” ， display”，iter ” ) ; 

% 和 参数 设置 使 用 中 等 规模 算法 ， 显 示 和 迭代 过 程 

A=[ -1,-2,-2; % 线 性 不 等 式 约束 系数 矩 
1,2,2]; : 

b =[0;72] ;% 线 性 不 等 式 约 束 常 量 向 量 

x0 =[10,10,10] ; 免 初始 迭代 点 

[x,fval ,exittag ,output,lambda ,grad ,hessian ] = 

fmincon(@ myfunl,x0,A,b,[],[],[],[],[],options) 

计算 结果 为 : 

Optimization terminated : magnitude of directional derivative in search 
direction less than 2 * options. TolFun and maximum constraint violation 
is less than options. TolCon. (正常 终止 ) 
Acetive inequajlities (to within options. TolCon = le -006) : 
lower upper ineqlin ineqnonlin 
生 
x=24. 0000 12. 0000 12. 0000 
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fval = -3. 4560e +003 
exitflag = 了 
output = 
iterations: 11 
funcCount: 28 
]ssteplength: 1 
stepsize: 0. 0011 
algorithm:" medium-scale: SQP，Quasi-Newton ，line-search， 
firstorderopt: 4. 75S97e -- 004 
message: [ 1x172 char] 
比较 函数 示例 〈1) 与 函数 示例 (2) ， 在 提供 一 阶 导数 后 ， 目 标 函 数 计算 次 
数 由 53 次 降 为 28 次 ， 可 以 有 效 地 减少 函数 计算 时 间 


7.4.3 函数 示例 (3) 


fmincon 函数 默认 的 求 导 方 法 为 差分 求 导 方法 。 为 了 便于 更 精确 地 计算 以 及 
减少 计算 时 间 ， 可 以 提供 目标 函数 导数 ，fmincon 天 数 的 默认 更 新 hesse 阵 的 方法 
为 BFCS。 对 于 大 规模 算法 ， 为 了 便于 更 精确 地 计算 以 及 减少 计算 时 间 ， 可 以 提 
供 目标 画 数 hesse 阵 函 数 。 以 下 还 是 以 函数 示例 (1) 的 优化 问题 为 例 。 
编写 目标 函数 M 文件 myfun3. m 
function [f,g,h] =myfun3(x) 
f= -~Xx(1) *x(2) *X(3); 
g=[-x(2)*x(3); 多 一 阶 导数 

-Xx(1) *x(3); 

-Xx(1)*x(2)]; 
h=[0，-x(3)，-x(2);  % 二 阶 导数 

-~x(3),，0，-x(1); 

-x(2)，-x(1),0]; 
调用 fmincon 本 数 M 文件 SolveMyfun3. m 
options = optimeet(“”LargeScale" ，on " , "GradO0bj' , "on , " Hessian ,on' ) ; 

%% 和 参数 设置 使 用 中 等 规模 算法 ,使 用 目标 函数 一 阶 与 二 阶 导 函 数 
A=[ -1,-2,-~2; %% 线 性 不 等 式 约 东 系数 矩阵 
1,2,2]; 
b =[0;72];% 线 性 不 等 式 约 东 常量 向 量 
x0 =[10,10,10] ;和 初始 迭代 点 
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[x,fval,exitflag ,output] =fmincon(@myfun3 ,x0,A,b,[j,[],[],[J],[j],options) 
计算 结果 为 ; 
大 规模 算法 -信赖 域 算法 不 能 解决 该 类 型 问题 ,用 中 等 规模 算法 代替 。 显 示 
下 : 
> In fmincon at 303 
In SolveMyfun3 at 7 
(Quasi-Newton method 不 需要 分 析 Hessian 阵 ) 
Waming: Medium-scale method is a Quasi-Newton method and does not use 
anajytic Hessian， Hessian flag in options will be ijignored. 
> In fmincon at 308 
In SolveMyfun3 at 7 
Optimization terminated : magnitude of directional derivative in search 
direction less than 2 * options. TolFun and maximum constraint violation 
is less than options. TolCon. 
Acetive inequalities (to within options. TolCon = le -006 ) : 
]ower ”upper ineqlin ineqnonjin 
2 


24. 0000 12. 0000 12. 0000 
fval = 
-3. 4560e +003 
exittlag = 
5 
outpnut = 
iterations: 11 
fncCount: 28 
]ssteplength: 1 
stepsize: 0. 0011 
algorithm: "medium-scale: SOQOP，Quasi-Newton ，line-search， 
firstorderopt: 4. 7597e - 004 
message: [ 1x172 char] 
该 示例 只 做 Hessian 阵 使 用 方法 的 示例 ， 只 有 在 求解 大 规模 优化 问题 的 时 
候 ，Hessian 阵 分 析 方 法 才 被 使 用 。 
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7.4.4 函数 示例 (4) 


minf= 下 (zG -于 )， 有 =100 


S. 十 -10<x(i 切 二 10,1=1, 2，…，100 


编写 目标 函数 M 文件 myfun4. m 
function f= myfun4(x) 
n=length(x);%n=100 


ET13 
for i=1:100 
f=f* (x(i) -1/i)i 
end 
调用 fmincon 琐 数 m 文件 SolveMyfun4. m 
max “Line search 
Jter 了 -count f(x) constraint steplength 
Procedure 
0 101 0 -9 
1 202 -0. 0001 -9 1 
2 303 -0.013943 -8.99 1 
3 404 -0. 263441 -8. 838 1 
4 505 -3. 30667e +013 0 1 
5 606 -7.2132e +099 0 1 
6 706 -7.2132e +099 0 2 


Directional 


derivative 


-0.0001 
-0.0216 
-0.671 
-8.99e+014 
-6.18e+101 
0 


First-order 
optimajity 


0.01 

0. 0273 

0. 483 

2. 79e +013 
7. 59e +098 
ON\ 


最 优化 终止 : 一 阶 导 的 误差 小 于 TolFun 的 限制 , 并 且 约 束 的 最 大 违背 要 求 的 


数值 小 于 TolCon 的 限制 。 
X=[ -10,10,10,….10] 
fval = -7.2132e +099 
exitlag =1 
outpnut = 
iterations : 6 
funcCount: 706 
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lssteplength: 2 

stepsize: 0 

algorithm : medium-scale: SQP，Quasi-Newton ，line-search 
firstorderopt: 0 

message: [1xl44 char] 


7.4.5 函数 示例 (5) 


minf = -- Y exp(s(D)) xain(x(i)),nm=10 


8. 革 之 < 三 100 


0<x(i) <I10 ii=1,2, …,10 


编写 目标 函数 M 文件 myfun5. m 
function f= myfuns(x) 
n=length(x);%n=100 
f= ~-sum(exp(x).*sin(x)); 
和 色 -sum(exp(x). *sin(x) ) 
= -exp(x(1))*sin(x(1)),……,-exp(x(n))*sin(x(n)) 
编写 非 线性 约束 函数 M 文件 mycon5. m 
function[ ce,ceq] = mycon5(xy》 
c =sum(x. 2) -100; % 关于 x 非 线性 不 等 式 约束 . 
%sum(x. 2) -100=x(1)2+…+xn)2 -100<=0 
ceq =[];，% 关于 x 非 线性 等 式 约束 . 
调用 fmincon 琐 数 的 M 文件 solvyeMyfun5. m 
options = optimset("LargeScale" ，off” ，display”，iter  ) ; 
% 和 参数 设置 使 用 中 等 规模 算法 ,显示 迭代 过 程 
]hb = zeros(1,10);%lb=[0,0,.... ;0] 
ub = 10 * ones(1,10); %ub =[10,10,,.... ,10] 
x0 = ones(1,10);%x0=[1,1,.... ,1] 
[x,fwal,exitflag,output] = fmincon(@ myfun5,x0,[],[],[],[], 了 ,中 ,@mycon5,op- 


tions ) 
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计算 结果 为 : 
max Line search 

Jter F-count f(x) constraint steplength 

Procedure 

0 11 -22. 8736 -1 

1 23 一 46.3194 一 2.878 0.5 

2 35 -71.9827 “” -2.156 0.5 

3 46 -74. 1165 -2.273 1 

4 57 --74. 5731 一 2. 377 1 

5 68 一 74.6046 “” -2.354 1 

6 80 -74. 6047 -2. 353 0. 5 

7 93 -74. 6049 -2.357 0. 25 

8 104 -74. 6049 “” -2.356 1 


Directional 


derivative 


471 

35.2 
=-1.34 

0. 324 

0. 00591 

0. 000148 
0. 000639 
2. 14e - 007 


Jrst-order 


optimality 


12.5 

2. 43 

1. 14 

0. 312 
0. 0282 
0. 0401 
0. 0122 


最 优化 终止 : 搜索 方向 的 方向 导数 小 于 TolFun 限制 值 的 2 倍 , 并 且 最 大 的 过 
背 约 束 值 小 于 TolCon 限制 值 , 无 起 作用 的 不 等 式 。 


芭 瑟 


Columns 1 through 9: 2. 3562 ”2. 3562 ”2. 3562 ”2.3562 ”2.3562 ”2. 3562 
2. 3562 ”2. 3562 ”2. 3562; Column 10: 2. 3562。 


fval = -74. 6049 

exitflag =5 

output = 
iterations: 8 
funcCount: 104 
]lssteplength : 1 
stepsize; 0. 0020 


algorithm: “medium-scalje: SQOP，Quasi-Newton ，line-search 


firstorderopt; 3. 4526e - 004 


message: [ 1x172 char] 
7.4.6 函数 示例 (6) 


函数 示例 (5) 只 有 不 等 式 约束 ， 现 在 在 示例 (5) 的 约束 优化 问题 中 加 入 


等 式 约 束 ， 原 优化 问题 变 为 : 
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min = ~ exp(x(i)) xsin(x(i)),m = 10 


8. 人 全 xD 三 100 
1 


> = 20 
0 <x(i) 三 10,1 =1,2,，…,10 
编写 目标 画 数 M 文件 myfun6. m 
function 和 = myfun6(x) 
n=]length(x);%n=100 
f= -sum(exp(x), *#sin(x) ); 
狼 --sum(exp(x). *sin(x) ) 
= -exp(x(1))*sin(x(1T)),，……， 一 exp(x(n))*sin(x(n)) 
编写 非 线性 约束 函数 m 文件 mycon6. m 
function fc,ceq] = mycon6(x) 
c =sum(x. 2) -100; % 关于 x 非 线性 不 等 式 约束 . 
- 狗 sum( 世 2) -100=x(1)2+…+xn)2 -100<=0 
ceq =sum(x) -20; 色 关于 x 非 线性 等 式 约 束 
调用 fmincon 函数 的 m 文件 solveMyfun6. m 
options = optimset(“”LargeScale” ， off" ，display” ，" off” ) ; 
% 参 数 设置 使 用 中 等 规模 算法 ,不 显示 和 迭代 过 程 
lb =zeros(1,10) ;% 了 了 b=[0,0,…,0] 
ub =10 * ones(1,10); %uhb =[10,10,…,10] 
x0 =ones(1,10);%x0=[1,1,…,1] 
[x,fval,exitlag ,output] = fmincon(@ myfun6,x0,[],[],[],[],b,ub,@mycon6,op- 
tions ) 
计算 结果 为 ; 
X = 
Columns 1 through 9 
2. 0000 2. 0000 2. 0000 2. 0000 2. 0000 2. 0000 2. 0000 
2.0000 2. 0000 
Column 10 
2. 0000 
fval = -67. 1885 
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exitftlag = 1 
output = 
iterations; 2 
funcCount: 35 
lssteplength : 0. 2500 
stepsize: 4.7595e - 007 
algorithm: "medium-scale; SOQOP，Quasi-Newton ，line-search， 
firstorderopt: 8. 4232e -007 
message: [1xl44 char] 


7.4.7 函数 示例 (7) 


含 参数 的 优化 问题 : 一 个 控制 系统 要 根据 环境 作 优化 配置 。 如 果 环 境 变化 ， 
原 优化 方程 中 的 系数 就 会 发 生变 化 ， 需 要 根据 新 的 环境 参数 重 作 做 优化 配置 。 这 
个 控制 系统 会 用 到 含 参数 的 优化 问题 。 


minf = 袜 (x(D) -ai)?,n =5 


和 > = 几 


0 三 x(i) 和 10,1 =1,2，…，,5 
其 中 ab 为 参数 。 
， 编写 目标 函数 M 文件 myfun7. m 
function f = myfan7(x,a) 
f=sum((x--a).22); 
%f=(x(1)-a(1))2+…+(xn) -an))2 
编写 约束 天 数 四 文件 mycon7. m 
function [ ec,ceq] = mycon7(x,b) 
c=[j; 
ceq =sum(x) -~b; % 关于 x 非 线性 等 式 约 束 . 
编写 调用 fmincon 的 M 文件 solveMyfun7 
options = optimset(“”LargeScale” ，of 作 " ,，" display” , off” ) ; 
% 参 数 设 置 使 用 中 等 规模 算法 ,不 显示 迭代 过 程 
lb = zeros(1,5);% 了 hb=[0,0,…,0] 
ub = 10 * ones(1,5); %ub = [10,10,…,10] 
a=[1,2,3,4,5];% 参 数 a=[1,2,3,4,5] 
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b =15; 多 参 数 b =15 
x0 =ones(1,5);%x0=[1,1,…,1] 
[ x,fval,exitflag,output] = fmincon(@ (x) myfun7(x,a), x0, [],[],[],[],h， 
ub，@ (x)mycon7(x,b) ，obtions ) 
计算 结果 为 ; 


1. 0000 2. 0000 3. 0000 4. 0000 5. 0000 
fval =7. 576Se -014 
exitflag =1 
outpnut = 
iterations; 6 
funcCount, 42 
lssteplength : 1 
stepsize: 3. 0857e - 004 
algorithm:" medium-scale: SQP，Quasi-Newton ，line-search， 
firstorderopt: $. 72S1e -- 007 
message: [ 1xl44 char ] 


第 8 章 ， 非 线性 最 小 二 乘法 


在 数据 拟 合 或 者 曲线 拟 合 中 都 会 用 到 最 小 二 乘法 ， 即 残 差 平方 和 最 小 的 方 
法 。 其 标准 模型 为 : 
min fxz) = 二 [rn(z)]2= 坟 |r(z) 1 (8-1) 


其 中 r(r) = (mn(z)，…，ra(z)) 称 为 在 x 点 的 残 差 向 量 。 设 拟 合 数 据 样 本 集 
合 为 : 瑟 = fx) ， xC) ， ev Zn] ， 7Y= |y0) ， Y) ， 9 yy | ; 回归 模型 为 ; ? 
= 工 (z) ， 则 残 差 项 为 r(z@ ) = 工 (xz ) -y09。 

数据 拟 合 根据 拟 合 模型 的 性 质 以 及 约束 条 件 ， 可 以 分 为 线性 拟 合 与 非 线 性 拟 
合 。 由 于 无 约束 线性 拟 合 的 解法 已 经 非常 成 熟 ， 所 以 本 文 主要 讨论 带 约束 的 以 及 
非 线性 模型 的 最 优 系数 求解 方法 。 非 线性 最 小 二 乘法 的 求解 基本 思路 是 : 把 非 线 
性 最 小 二 乘法 问题 当 作 非 线性 最 优化 问题 ， 再 结合 非 线性 最 小 二 乘法 的 特殊 数学 
性 质 ， 引 入 新 的 专门 针对 非 线性 最 小 二 乘法 的 非 线 性 最 优化 方法 ， 即 高 斯 -牛顿 
法 (Guass-Newton) ， 莱 温 伯 格 - 马 奎 特 法 ( Levenberg-Marquardt) ， 简 称 L-M 法 。 

MATLAB 的 内 置 求解 非 线性 最 小 二 乘法 函数 包括 : 

(1) lsqnonneg: 求解 非 负 约束 的 最 小 二 乘 问题 。 

(2) lsqlin: 求解 带 约束 的 线性 最 小 二 乘 问题 。 

(3) lsqnonlin: 求解 非 线性 最 小 二 乘 问题 。 

(4) lsqcurvefit: 求解 非 线 性 数据 拟 合 问题 ， 在 最 小 二 乘 原理 情况 下 使 用 。 


8.1 高 斯 -牛顿 法 


对 于 非 线 性 最 小 二 乘 问题 ; 
min 信 z) = 到 三 [n(o)] 


根据 上 两 章 关 于 非 线性 最 优化 的 介绍 ， 我 们 知道 目标 本 数 的 一 阶 函 数 与 二 阶 导 
数 和 矩阵 对 优化 的 整个 迭代 过 程 起 着 至 关 重 要 的 作用 。 如 果 函 数 r(x*) = 
(rn(x)，…rn(z)) 是 二 次 连续 可 微 ， 则 .F(z) 的 一 阶 导数 与 二 阶 导 数 (hessian 
阵 ) 分 别 为 ， 

gr) =VFz) =4(xz)r(z) 
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G(z) = ftz) =4(z)4(z)7+ ni(z) ri(z) 
=aMf(r)+SCr) 
这 里 4(Y) =[Vr(z),…Vro(r)] 
对 一 般 无 约束 优化 问题 的 高 斯 -牛顿 算法 ， 在 迁 代 点 x 由 取 目 标 函 数 /xz) 下 
列 形式 的 二 次 近似 ; 
1 


qg(5 人 9 ) = 大 工作 ) 十 8(DT5 人 到 5 MB5 
的 最 优化 解 作为 搜索 方向 ， 利 用 M(x) 近 似 代替 吾 (x) 。 
(8 四) -Hz ) = (4A(8@)r(5))T80 + 本 80r(A(5w)A(6O)750 


的 最 优化 解 为 : 

ae (5 全 )4(540 )7509 二 -4(54 )r(545 ) 的 解 。 

下 降 和 迭代 为 : 

ze0 =a8O 

其 中 ax 为 步 长 ， 可 以 通过 线性 搜索 确定 。 

从 上 述 高 斯 -牛顿 法 基本 思想 可 以 得 出 该 算法 的 以 下 三 个 特性 : 

(1) 高 斯 -牛顿 法 的 收敛 与 否 直接 取决 于 hessian 阵 的 缺 省 部 分 SC(xz) 的 大 小 ， 
如 果 SGz) 大 于 M(z)， 则 高 斯 -牛顿 法 一 般 不 收敛。 

(2) 如 果 M(xz) 正 定 ， 则 高 斯 -牛顿 法 局 部 收敛 。 

(3) 如 果 算 法 收敛 ， 则 收敛 速度 基本 取决 于 S(z) 的 大 小 。S(r) =0， 算 法 
二 次 收 信 ，S(x) 天 0 算法 线性 收敛 。 

根据 高 斯 -牛顿 法 这 三 个 特性 ， 人 们 引入 了 许多 改善 高 斯 -牛顿 法 的 方法 ， 其 
中 比较 有 效 的 为 阻尼 牛顿 法 与 莱 温 伯 格 - 马 硅 特 法 。 

莱 温 伯 格 - 马 奎 特 法 对 高 斯 -牛顿 法 的 改善 是 通过 将 高 斯 -牛顿 法 的 近似 求解 下 
降 方向 公式 ; 

(5 )4(50 )7549 号 -上 (5G9 )r(5 ) 
变 为 : 
(4(5”)4(5”) +H1)5 ”= -4(5”)r(5”) 

对 于 给 定 的 上 > 0， 如 果 65” 为 上 式 的 解 ， 则 5 是 下 列 信赖 域 问 题 的 全 局 最 
优 解 : 


min gh(5) = 并 | 40078 + 用 


st 51<152 | 
莱 温 伯 格 - 马 奎 特 法 利用 信赖 域 求解 下 降 方向 。 
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8.2 lsqnonneg 天 数 (求解 非 负 约束 的 最 小 二 乘 问题 ) 


lsqnonneg 函数 的 计算 模型 为 
min 二 | Cr -da 有 


s，t。 YEI0 

lsqnonneg 函数 使 用 的 算法 为 非 线性 最 优化 的 单纯 形 法 ( Nelder-Mead 
Simplex) 。 

函数 语法 : 
x=]lsqnonneg(C,d) 
Xx=]sqnonneg(C,d,x0) 
x =]sqnonneg(C ,d,x0 ,options) 
[x,resnorm ] =lsqnonneg(…) 
[ x,resnorm ,residual ] = lsqnonneg(…) 
[ x,resnorm ,residual ,exitflag ] =lsqnonneg(…) 
[ x,resnorm ,residual ,exitflag ,output] =]sqnonneg(…) 
[ x,resnorm ,residual ,exittlag ,output,lambda] = lsqnonneg(…) 

本 数 输入 ; 
C,d: 氢 合 的 样本 数据 ; C 的 每 一 行 代表 一 组 观察 数据 ，C 的 行 数 要 大 于 等 于 C 

的 列 数 

z0: 初始 选 代 点 
options; 函数 参数 设置 

函数 输出 : 
X: 最 优点 (或 者 迭代 停止 点 ) 
Resnorm :， 残 差 平方 和 norm(C * x-d)“2 
Residual : 残 差 C * x-d 向 量 
Exitflag : 算法 退出 表示 

1 算法 成 功 收敛 
0 算法 达到 最 大 迭代 次 数 
Output: 算法 选 代 计 算 信 息 
Lambda: 拉 格 朗 日 乘 子 
” 函数 示例 : 

非 负 线性 回归 模型 不 含 常数 项 示例 ，M 文件 Showlsqnonneg. m 
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C-[ 
0. 0372 0. 2869 
0. 6861 0. 7071 
0. 6233 0. 6245 
0. 6344 0.6170 ] ; 
dc=[ 
0. 8587 
0. 1781 
0. 0747 
0. 8405 ] ; 
[ x,resnorm ,residual ,exitflag ,output ,lambda ] = lsqnonneg(C ,d) 
计算 结果 : 
x 三 
0 
0. 6929 
resnorm =0. 8315 
residual = 
0. 6599 
-0.3119 
-0.3580 
0. 4130 
exitflag = 1 
outpnut = 
iterations: 1 
algorithm : ' active-set using svd 
message:; ' Optimization terminated. ， 
lambda = 
-0. 1$06 
0. 0000 
若 该 问题 没有 非 负 约束 ， 使 用 线性 最 小 二 乘 公式 ; 
Cr =d=x=C-d 
C=[ 
0. 0372 0. 2869 
0. 6861 0. 7071 
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0. 6233 0. 6245 
0. 6344 0.6170 ] ; 


d=[ 
0. 8S$87 
0. 1781 
0. 0747 
0. 8405 ] ; 
X=C\d(d 左 除 C) 
计算 结果 : 
一 2. 5627 
3. 1108 
8.3 jlsqlin 了 郴 数 (求解 带 约 束 的 线性 最 小 二 乘 问 题 ) 
lsqlin 函数 的 计算 模型 为 
min 二 | Cr -ad 
s. t， MY 三 万 
4egxz=pe9q 
本 三 fx 三 到 
lsqlin 函数 使 用 的 算法 为 信赖 域 算法 。 
函数 语法 : 


x=]lsqlin(C,d,A,b) 
Xx=jlsqlin(C,d,A,b,Aeq,beq) 
x=j]sqlin(C,d,A,b,Aeq,beq,lb,ub) 
x=jlsqlin(C,d,A,b,Aeq,beq,lb,ub,x0) 
x=jlsqlin(C,d,A,b,Aeq,beq,lb,ub,x0,options) 
[x,resnorm] =lsqlin(…) 

[ x,resnorm,residual] =lsqlin(…) 

[x,resnorm,residual ,exitflag] = lsqlin( …) 
[x,resnorm,residual,exitflag ,output] = lsqlin(…) 
[x,resnorm ,residual ,exitflag ,output,lambda] =lsqlin( …) 
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函数 输入 : 
C,d: 拟 合 的 样本 数据 ; C 的 每 一 行 代表 一 组 观察 数据 ，C 的 行 数 要 大 于 等 于 C 
的 列 数 
A: 线性 不 等 式 约束 系数 矩阵 
B: 线性 不 等 式 约 束 常 向 量 
Aeq: 线性 等 式 约束 系数 矩阵 
Beq: 线性 等 式 约束 常 向 量 
Lb: 变量 下 界 
Ub: 变量 上 界 
x 台 : 初始 迭代 点 
options: 本 数 参数 设置 
本 数 输出 : 
X: 最 优点 (或 者 迭代 停止 点 ) 
Resnorm ; 残 益 平方 和 norm{f C * x-d) “2 
Residual ， 残 差 C * x-d 向 量 
Exittlag: 算法 退出 表示 
1 算法 成 功 收敛 
3 残 差 的 变化 小 于 算法 误差 控制 参数 
0 算法 达到 最 大 迭代 次 数 
-2 问题 无 解 
-4 出 现 变 态 条 件 ， 算 法 无 法 继续 进行 
-7 下 降 方 向 范 数 过 小 ， 不 能 进行 有 效 适 代 
Output : 算法 和 迭代 计算 信息 
Lambda:， 拉 格 朗 日 乘 子 
函数 调用 示例 : 
下 面 我 们 将 列举 两 个 具体 的 使 用 示例 ， 一 个 线性 回归 模型 不 含 常数 项 ， 另 一 
个 线性 回归 模型 含有 常数 项 ; 
Y=GIXI 十 十 QX。 
= ao +GIXI 十 十 加 


其 中 ao 为 常数 项 。 
8.3.1 函数 示例 (1) 


min 妃 工 ) 马 这 [(xicii + 十 2aCm1) -d] 
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0. 1987 0. 1988 0. 4450 ”0. 4186 0. 2026 
0. 6037 0.0152 0.9318 0. 88462 0. 6721 
(-0.1, -0.1, -0.1, -0.1)7<xz<(2,2,2,2)7 
线性 回归 模型 不 含 常数 项 示例 ，M 文件 ShowLsqlin1. m 
和 数据 矩阵 C 
C=[ 
0. 9501 0.7620 ”0.6153 0. 4057 
0. 2311 0. 4564 0. 7919 0. 9354 
0. 6068 0.0185 0. 9218 0. 9169 
0. 4859 0. 8214 0. 7382 0. 4102 
0.8912 “0.4447 “0.1762 ”0.8936]; 
多 数据 矩阵 d 
dz=[ 
0. 0578 
0. 3528 
0.8131 
0. 0098 
0. 1388 ] ; 
多 线性 不 等 式 约束 系数 矩阵 
A=[ 
0. 2027 0. 2721 0. 7467 0. 4659 
0. 1987 0. 1988 0. 4450 0. 4186 
0. 6037 0. 0152 0. 9318 0. 8462 ] ; 
多 线性 不 等 式 约束 常数 矩阵 
b=[ 
0. 5251 
0. 2026 
0. 6721] ; 
色 变 量 可 行 下 届 
lb= -0.1*ones(4,1); 
%% 变 量 可 行 上 届 
ub =2 * ones(4,1); 
[ x,resnorm ,residual ,exitflag ,output ,lambda] =lsqlin(C,d,A,b,[ ]，[ ] ，ib，ub) 


st+ 0.2027 0.2721 0.7467 ”0.4659 [ 河 
天 三 
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计算 结果 : 


ptimization terminated. 


0. 3502 
resnorm =0. 1672 
residual = 
0. 0455 
0. 0764 
-0. 3562 
0. 1620 
0. 0784 
exitflag = 1 
output = 
iterations: 4 
algorithm; 'medium-scale ; active-set ' 
firstorderopt: [ 
cgiterations : [ ] 
message: ' Optimization terminated. ， 
lambda = 
lower: [4xl double] 
upper: [4xl double] 
eqlin: [0xl double ] 
ineqlin : [3xl double] 


8.3.2 函数 示例 (2) 


min 矿工 ) 二 三 [(xo 二 MX1ci1 十 六 十 Naca1 =- 丰 】 


st (0.0 0.2027 0.2721 0.7467 0.4659 0. 5251 
区 0. 1987 0. 1988 0. 4450 aa6 | 2 
0.0 0.6037 0.0152 0.9318 0. 88462 0. 6721 
( -0.1, -0.1, -0.1, -0.1,0.1)7<xz<(2,2,2,2,2)7 
线性 回归 模型 不 含 常数 项 示例 ，M 文件 ShowLsqlin2. m 
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和 数据 矩阵 C 
C=[ 
1 0. 9501 0. 7620 0. 6153 0. 4057 
1 0. 2311 0. 4564 0. 7919 0. 9354 
1 0. 6068 0.0185 0. 9218 0.9169 
1 0. 4859 0. 8214 0. 7382 0. 4102 
1 0. 8912 0. 4447 0. 1762 0. 8936 ] ; 
印 数据 矩阵 d4 
d=[ 
0. 0578 
0. 3528 
0. 8131 
0. 0098 
0. 1388 ] ; 
色 线性 不 等 式 约束 系数 矩阵 
A=[ 
0.0 0. 2027 0. 2721 0. 7467 0. 4659 
0.0 0. 1987 0. 1988 0. 4450 0. 4186 
0.0 0. 6037 0. 0152 0. 9318 0. 8462 ] ; 
%% 线 性 不 等 式 约束 常数 矩阵 
b =[ 
0. $251 
0. 2026 
0.6721 ] ; 
色 变量 可 行 下 界 
lb = -0.1*ones(S,1); 
多 变量 可 行 上 界 
ub = 了 2 水 ones(5 呈 ) 
[ x ,resnorm ,residual ,exittlag ,output ,lambda] =lsqlin(C,d,A,b,[ ]，[ 1], 了 茵 ，ub) 
计算 结果 : 
Optimization terminated. 
X 二 
-0.0013 (常数 项 ) 
-0. 1000 
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-0. 1000 
0. 2143 
0. 3512 
resnorm =0. 1672 
residual = 
0. 0440 
0. 0753 
-0. 3575 
0. 1604 
0. 0778 
exitflag = 1 
output = 
iterations: 6 
algorithm: 'medium-scale: active-set ' 
firstorderopt: [ ] 
cgiterations: [ ] 
message: ' Optimization terminated. ' 
]ambda = 
lower: [Sxl double ] 
upper: [S$xl double ] 
eqlin: [0xl double j 
ineqlin: [3xl double] 


8.4 lsqnonlin 随 数 (求解 非 线性 最 小 二 乘 问题 ) 


lsqonlin 函数 的 计算 模型 为 ， 
min 扎 Y) = 户 (z) +F2(X) +… ++ 太 ns() 
st 戌 三 xz 三 邮 

lsqonlin 函数 使 用 的 算法 为 信赖 域 算法 。 

函数 语法 : 
x=]lsqnonlin(fun,x0) 
Xx=jlsqnonlin(fun,x0,jb,ub) 
x = lsqnonlin( fun,x0 ,了 b,ub ,options) 
[ x,resnorm ] =]lsqnonlin(，…) 
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-0. 1000 
0. 2143 
0. 3512 
resnorm =0. 1672 
residual = 
0. 0440 
0. 0753 
-0. 3575 
0. 1604 
0. 0778 
exitflag = 1 
output = 
iterations: 6 
algorithm: 'medium-scale: active-set ' 
firstorderopt: [ ] 
cgiterations: [ ] 
message: ' Optimization terminated. ' 
]ambda = 
lower: [Sxl double ] 
upper: [S$xl double ] 
eqlin: [0xl double j 
ineqlin: [3xl double] 


8.4 lsqnonlin 随 数 (求解 非 线性 最 小 二 乘 问题 ) 


lsqonlin 函数 的 计算 模型 为 ， 
min 扎 Y) = 户 (z) +F2(X) +… ++ 太 ns() 
st 戌 三 xz 三 邮 

lsqonlin 函数 使 用 的 算法 为 信赖 域 算法 。 

函数 语法 : 
x=]lsqnonlin(fun,x0) 
Xx=jlsqnonlin(fun,x0,jb,ub) 
x = lsqnonlin( fun,x0 ,了 b,ub ,options) 
[ x,resnorm ] =]lsqnonlin(，…) 
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[x,resnorm ] = lsqnonlin( @ lsqonlinmyfun ,x0) 
计算 结果 ; 
Optimization terminated : norm of the current step is less 
than OPTIONS. TolX. 
x=0.2578 0.2578 
resnorm = 124. 3622 


8.5 lsqcurvefit 郴 数 (求解 非 线 性 数据 拟 合 问题 ) 


lsqcurvefit 函数 的 计算 模型 为 : 
min 广 | P(xvzdata) -ydata 上 3 = 二 立 (Fr,zdata) -ydata) 


lsqcurvefit 函数 计算 使 用 信赖 域 算法 。 
天 数 语法 ; 
x =]sqcurvefit( fun ,x0 ,xdata ,ydata ) 
x = ]sqcurvefit( fun ,x0 ,xdata ,ydata ,lb ,ub) 
Xx=]sqcurvefit( fun ,x0 ,xdata,ydata ,jb ,ub ,options ) 
[x ,resnorm ] =]sqcurvefit(…) 
[x,resnorm ,residual] = lsqcurvefit( …) 
[x,resnorm ,residual ,exitflag ] = lsqceurvefit( … ) 
[x,resnorm,residual ,exitflag ,output] =]lsqcurvefit( …) 
[x,resnorm,residual ,exitflag ,output,lambda] = lsqcurvefit( … ) 
[x,resnorm,residual ,exittlag ,output,lambda ,jacobian] =]sqcurvefit( …) 
函数 输入 : 
Fun: 优化 目标 函数 
Xdata: Ydata: 样本 数据 
Lb: 变量 下 界 
Ub: 变量 上 界 
x0: 初始 选 代 点 
options; 函数 参数 设置 
本 数 输出 : 
X: 最 优点 (或 者 迭代 停止 点 ) 
Resnorm:， 残 差 平方 和 norm(C * x-d)“22 
Residual: 残 差 C * x-d 向 量 
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Exitfag: 算法 退出 表示 
算法 收敛 
x 变化 小 于 函数 误差 控制 参数 
残 差 变化 小 于 函数 误差 控制 参数 ， 
下 降 方向 范 数 小 于 函数 误差 控制 参数 
算法 和 迭 代 次 数 达 到 算法 的 最 大 迭代 次 数 
-1 算法 因为 输出 函数 终止 
-2 问题 无 解  . 
-4 算法 无 法 继续 进行 
Output: 算法 和 迭代 计算 信息 
Lambda: 拉 格 朗 日 乘 子 
函数 调用 示例 : 


己 上 mi 于 


回归 模型 :ydata(i) =x(1)etGs(2)xaam(D) 
优化 问题 : min 工 (天 (x,xdata(i) ) -ydata(i)) 


编写 目标 函数 M 文件 laqeurvefitmyfun. m 
function f= lsqcurvefitmyfun{(x,xdata ) 
F=x(1) *exp(x(2) * xdata) 
调用 lsqcurvefit 函数 Showlsqcurvefit m 
和 % Assume you determined xdata and ydata experimentally 
xdata = [0.9 1.5 13.8 19.8 24.1 28.2 35.2 60.3 74.6 81.3]; 
ydata = [455. 2 428.6 124. 1 67.3 43.2 28.1 13.1 -0.4 -1.3 -1.5]; 
x0=[100,-1] ; 色 初始 迭代 点 
[x, resnorm , residual ， exitflag , output, lambda ] = lsqcurvefit ( @ ]sqcurvefitmyfun , x0 ， 
xdata ,ydata) 
计算 结果 ; 
Optimization terminated : relative function value 
changing by less than OPTIONS. TolFun. 
x=498. 8309 -0.1013 
resnorm = 9. 5049 
residual = 
Columns 1 through 9 
0.1817 -0.0610 -0.7628 ” -0.1196 0.2659 0.5979 1.0261 
1.5124 1. 5615 
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Column 10 
1. 6327 
exitflag =3 
output = 
firstorderopt: 0. 0114 
iterations: 27 
funcCount: 84 
cgiterations : 23 
algorithm :'large-scale: trust-region reflective Newton 
message: [1x87 char] 
lambda = 
lower: [2xl double] 
upper: [2xl double] 
结果 图 像 如 图 8-1 所 示 。 
5S00 








图 像 的 matlab 程序 : PlotShowlsqcuverfit. m 

xdqata = [0.9 1.5 13.8 19.8 24. 1 28.2 35.2 60.374.681.3]; 

ydata = [455. 2 428.6 124. 1 67.3 43.2 28.1 13.1 -0.4 -1.3 -1.5]; 
x=[498.8309 “ -0.1013 ] ; 

F=x(1) *exp(x(2) * xdata) ; 

plot(xgata ,ydata ,'*') ; 

hold on 

plot( xdata ,F) ; 
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前 面 各 章 中 ， 求 解 问题 的 变量 大 多 数 都 是 连续 变量 ， 但 在 许多 实际 问题 
中 往往 要 求 变 量 取 值 为 整数 。 如 涉及 人 数 、 飞 机 数 、 车 辆 数 、 机 器 台数 等 。 
本 章 主要 讨论 变量 为 0 或 1 的 整数 规划 问题 ， 该 类 问题 可 以 简称 为 0-1 整数 
规划 。 


9.1 0-1 整数 规划 的 基本 模型 


例如 资本 预算 问题 ， 决 策 者 要 对 若干 潜在 的 投资 方案 作出 选择 ， 决 定 取舍 
(1: 取 ,0: 舍 )。 设 共有 个 投资 方案 ，50 =1,2,……m) 为 第 7 个 方案 的 投资 收益 ， 
整个 投资 过 程 共 分 为 严 个 阶段 ， 上 为 第 i 个 阶段 的 投资 总 量 ，cy 为 第 ; 个 阶段 第 7 
个 方案 的 所 需 资 金 。 目 标 是 在 各 个 阶段 资金 限制 条 件 下 使 得 整个 投资 方案 的 总 收 
益 最 大 。 

这 类 问题 是 典型 的 决策 问题 。 设 决策 变量 % 为 对 第 个 方案 的 取舍 (1: 取 ,0 
舍 ) ， 可 得 到 如 下 整数 规划 问题 (是 0-1 规划 ) : 


IDn8X 2 二 》 Cj 
mm】 


S, tt 名 CjMXj 实 忆 1 =1 2， 也 
5 =0， 或 1， 了 =】2 
其 中 约束 : 


之 GjXj 三 六 ， 1 =1 ,2 ,… ,了 凤 
j = 


反映 了 第 站 个 时 期 资金 增长 量 的 平衡 。 这 里 a, 为 第 i 个 阶段 第 ) 个 方案 资金 净 
流量 ; 

(1) ai >0， 表 示 第 i 个 阶段 第 /个 方案 需要 附加 资金 。 

(2) o <0， 表 示 第 i 个 阶段 第 ) 个 方案 产生 资金 。 

右 端 项 上 为 第 ;个 阶段 外 源 资金 流量 的 增长 量 ; 

(1) & >0， 表示 第 1 个 阶段 附加 资金 的 数量 。 
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(2) 六 <0， 表 示 第 ;个 阶段 抽 回 资金 的 数量 。 
0-1 规划 的 一 般 标准 模型 为 ; 


min 九 x) = Cixi 


s. 十 和 QijS 负 =,2， 
Jm1 


》， ee 三 四 三 列 十 1 下 十 了 


2 =0,， 或 1, J=1,2……m 
用 矩阵 的 标准 形式 可 以 表示 为 : 
min Fr) =crx 
st 4rs 专 
4edqx =5ed 
x =0, 或 1, j=1, 2，…， nm 
式 中 ,4 为 不 等 式 约束 的 系数 矩阵 ; 8 为 不 等 式 约 束 的 常数 项 ; 4eg 为 等 式 约束 
的 系数 矩阵，zey 为 等 式 约 束 的 常数 项 。 


9.2 分 枝 定 界 法 与 隐 枚 举 法 


1， 分 枝 定 界 法 

分 枝 定 界 法 (branch and bound) 是 一 种 求解 整数 规划 问题 的 最 常用 算法 。 这 
种 方法 不 但 可 以 求解 纯 整 数 规划 ， 还 可 以 求解 混合 整数 规划 问题 。 分 枝 定 界 法 也 
是 求解 0-1 规划 的 主要 算法 。 

分 枝 定 界 法 的 步 又 为 ; 

第 1 步 : 放宽 或 取消 原 问 题 的 某 些 约束 条 件 ， 如 求 整 数 解 的 条 件 。 如 


果 这 时 求 出 的 最 优 解 是 原 问 题 的 可 行 解 ， 那 么 这 个 解 就 是 原 问题 的 最 优 


解 ， 计 算 结束 。 和 否则 这 个 解 的 目标 函数 值 是 原 问题 的 最 优 解 的 上 界 ( 求 极 
大 值 时 ) 。 

第 2 步 : 将 放宽 了 某 些 约束 条 件 的 替代 问题 分 成 若干 子 问题 ， 要 求 各 子 问题 
的 解 集合 的 并 集 要 包含 原 问 题 的 所 有 可 行 解 ， 然 后 对 每 个 子 问题 求 最 优 解 。 这 些 
子 问题 的 最 优 解 中 的 最 优 者 若是 原 问 题 的 可 行 解 ， 则 它 就 是 原 问题 的 最 优 解 ， 计 
算 结 束 。 和 否则 它 的 目标 函数 值 就 是 原 问题 的 一 个 新 的 上 界 。 另 外 ， 各 子 问题 的 最 
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Ngagipeaieaiasiilgrayeppinpaeaaaiiiipagapaaa 
优 解 中 ， 若 有 原 问 题 的 可 行 解 的 ， 选 这 些 可 行 解 的 最 大 目标 函数 值 ， 它 就 是 原 问 
题 最 优 解 的 一 个 下 界 。 

第 3 步 : 对 最 优 解 的 目标 函数 值 已 小 于 这 个 下 界 的 问题 ， 其 可 行 解 中 必 无 原 
问题 的 最 优 解 ， 可 以 放弃 。 对 最 优 解 的 目标 函数 值 大 于 这 个 下 界 的 子 问题 ， 都 先 
保留 下 来 ， 进 入 第 4 步 。 

第 4 步 : 在 保留 下 的 所 有 子 问题 中 ， 选 出 最 优 解 的 目标 函数 值 最 大 的 一 个 ， 
重复 第 1 步 和 第 2 步 。 如 果 已 经 找到 该 子 问题 的 最 优 可 行 解 ， 那 么 用 其 目标 函数 
值 与 前 面 保 留 的 其 他 问题 在 内 的 所 有 子 问题 的 可 行 解 中 目标 函数 值 最 大 者 ， 将 它 
作为 新 的 下 界 ， 重 复 第 3 步 ， 直 到 求 出 最 优 解 。 

2. 隐 枚 举 法 

由 于 0-1 规划 模型 的 特殊 性 ， 对 0-1 规划 的 求解 存在 更 简便 的 方法 ， 称 为 
“ 隐 枚 举 法 ” (implicit enumeration method ) 。 用 分 枝 定 界 法 求解 整数 规划 时 ， 替 
代 问 题 是 放宽 变量 的 整数 约束 ; 而 用 隐 枚 举 法 求解 0-1 型 整数 规划 时 ， 替 代 问 题 
是 在 保持 变量 0-1 约 东 的 条 件 下 ， 放 松 问 题 的 资源 约束 。 下 面 通 过 例子 说 明了 路 枚 
举 法 的 具体 步 又。 

maxz = 100xi; +30x: +40xs +45x4 
s.tL S0x, +30x: +25x; +10xs 一 95 
7Txi +2x; +%3 +4x4 三 1] 
2xi +x2 +X3 ++10x4 三 12 
4 < 之 Ma 十 X%3 
XI1，M2，X3，X4 =0 或 1 
将 上 式 标准 化 ， 为 使 得 系数 为 正 ， 设 i =1 -5，i=1， 2，3，4,， 7=215 - 
zx， 取得 的 新 的 0-1 规划 为 : 
minf=100y, +30y> +407y3 +457y。 
s.t -507y, -30y: -25y -10 三 -20 

-77: -272 -) 474 三 -4 

-27: -2 -) 一 10y4 三 一 2 

ya + -4 三 1 

Yi，y，”，y4 =0 或 1 

下 面 用 二 元 枚 举 树 说 明 计 算 过 程 〈 见 图 9-1) 。 
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Bo 
y=(0.0.0,0) 
J=0， 不 可 行 


上 了 1 此 1 =0 
妥 也 2 
00- 7=(0.0.0.0 
大 100, 可 行 7=0， 不 可 行 
=100 六 为 =] 为 =0 
忆 ; B 工 
3=(0.1.0.0 并 ?=(0.0.0.0) 
JJ =30, 不 可 行 =0， 不 可 行 
为 =] 力 =0 只 3=1 此 3=0 
56 古 Bs 
Ri =(0.1.0.0 并 =(0.0.1.0 严 
7 了 =70, 不 可 行 J=30， 不 可 行 =40, 不 可 行 7 -0, 不 可 行 
及 =l 又 =1 为 严 1 因 天 1 
Bo 已 1 Bi 忆 15 
)=(0,1.LIT =(0.L0,1 y=(0.0.1.1J =(0.0.0,1 
=115 ,可 行 J =75, 可 行 =8S, 可 行 .=45, 不 可 行 
=115 勾 =75 汉 了 =85 勾 
所 = 专 =0 4=0 为 =0 
Bo 82 Bi14 BI6 1 
y=(0.11.07 =(0,1.0.0) =(0.0,1.07 =(0.0.0.0) 
J=70, 不 可 行 .=30, 不 可 行 了 =40, 不 可 行 -0, 不 可 行 
闪 流 > 又 
图 9-! 


少 3 bintprog 随 数 (求解 0-1 整数 规划 ) 


bintprog 函数 是 MATLAB 主要 的 求解 0-1 规划 的 函数 ， 该 函数 使 用 的 是 分 枝 
定 界 法 算法 。 函 数 求解 问题 的 标准 模型 为 ; 


3 =0， 或 1， J=1， 2， "9 
函数 语法 ; 
X=bintprog(Tf) 


742 运 等 学 与 最 优化 MATLAB 编程 


x=bintprog(f,A,b) 
x=bintprog(f,A,b,Aeq,beq) 
Xx=bintprog(f,A,b,Aeq,beq,x0) 
Xx =bintprog(f,A,b,Aeq,Beq,x0 ,options) 
[x,fvalj =bintprog(…) 
[x,fval,exittlag] = bintprog(…) 
[x,fval ,exitflag ,output] = bintprog(…) 
函数 输 人 : 
F: 目标 函数 系数 向 量 
A: 线性 不 等 式 约束 的 系数 矩阵 
B: 线性 不 等 式 约束 的 常数 向 量 
Aeq: 线性 等 式 约束 的 系数 矩阵 
Beq: 线性 等 式 约束 的 常数 向 量 
X0: 算法 初始 迭代 点 
Options: 算法 参数 设置 
本 数 输出 : 
X: 最 优点 ( 适 代 停止 点 ) 
Fval; 最 优点 (迭代 停止 点 ) 对 应 的 函数 值 
Fxitflag: 算法 结束 信息 
1: 算法 收敛 
0: 算法 达到 最 大 选 代 次 数 
-2: 目标 问题 无 解 
-4: 算法 搜索 节点 达到 最 大 节点 数 
-5: 算法 达到 最 大 的 和 迭代 时 间 
-6: 算法 求解 LP( 线 性 规划 ) 次数 达到 最 大 次 数 
Output: 函数 迭代 信息 


9.3.1 函数 示例 (1 ) 


min 乒 = 1007y; +30y2 +40y3 +4574 
st -30 -30y: -25y; -~ 10y, 大 -20 
-77i -2y2 -~》a -474 天 -4 
-2 -和 -一 107 大 -2 
ya +73 一 加 大 1 
入 ， 和 ，》，》y4 =0 或 1 
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编写 M 文件 test91. m 
options = optimset( ”display”，iter”) ; 
色 显示 选 代 点 
f=[100,30,40,45 ] ; 
和 目标 函数 系数 
A=[-50 -30 -25 -10; 

一 了 一 2 -1 一 个; 

~2 开 -1 一 10; 

0 1 1 -1 ]; 
% 不 等 式 约束 的 系数 矩阵 
b=[-20; -4; -2; 1]; 
%% 不 等 式 约束 的 常数 向 量 
[x,fval,exitlag,output] = bintprog(f,A,b,[]，[]，[] ，options) 

计算 结果 : 

Explored Ohbj of LP ”0Obj of best ”Unexplored “Best lower Relative gap 
nodes ”relaxation integer point nodesg “bound on ohj” between bounds 


1 48 一 2 48 一 
中 0 75 75 3 52. 5 30% 
11 65 75 0 65 13 狗 


fval =75 
exitflag = 1 
output = 

iterations; 21  〈 和 迭代 次 数 ) 

nodes: 11 (搜索 节点 数 ) . 
time: 0. 0300( 计算 时 间 ) 
algorithm :， LP-based branch-and-bound， 
《算法 :基于 线性 规划 的 分 枝 定 界 法 ) 
branchStrategy : ” maximum integer infeasibility， 
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(分 枝 策略 ,maximum integer infeasibility ) 
nodeSrchStrategy : ”best node search” (节点 搜索 策略 ) 
message: ” Optimization terminated.“ 


9.3.2 函数 示例 (2) 


将 示例 (1) 中 的 y% + -和 大 1 不 等 式 约 东 ， 变 为 等 式 约束 yi +ya +ya + 
Xi =3。 
min 乒 = 1007y, +30y: +40y3 +457， 
-50y -30y -2573: -10y4 大 -20 
-77 -272 -六 474 三 一 4 
st 1 -27 -2 -3 一 10y7 三 -2 

7 +7a +]3 +]4 =3 

和 ij，》，y4 =0 或 1 
编写 M 文件 test92. m 
options = optimset( " display”， iter ” ) ; 
名 显示 迭代 点 
f=[100,30,40,45 ] ; 
目标 函数 系数 
A=[-50 -30 -25 -10; 

-7 -2 -1 -4; 
-2 -1 -1 -10] 
多 不 等 式 约 束 的 系数 矩阵 
b=[ -20; -4; -2]; 
色 不 等 式 约 束 的 常数 向 量 
Aeq=[1,1,1,1]; 
% 等 式 约束 的 系数 矩阵 
beq =3; 
% 等 式 约束 的 常数 项 
[x,fval ,exittlag ,output] = bintprog(f,A,b,Aeq,beq,[ ] ，options) 
计算 结果 : 

Explored 0Obj of LP ”0Obj of best ”Unexplored ”Best lower Relative gap 
nodes relaxation integer point nodes bound on obj between bounds 
1 115 115 0 115 09%0 
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Optimization terminated 
X 二 
0 
1 
1 
1 
fval =115 
exithiag =]1 
outpait 二 
iterations: 之 
nodes ， 1 
time: 0. 2303 


algorithm: “LP-based branch-and-bound” 
branchStrategy : “ maximum integer infeasibility” 
nodeSrchStrategy:; "best node search 
message: “Optimization terminated.“ 


9.4 分 派 问题 


在 现实 世界 ， 经 常会 遇 到 这 样 的 问题 : 有 m 个 人 恰好 可 承担 mn 项 任务 ， 一 项 
任务 由 一 个 人 完成 ， 一 个 人 只 完成 一 项 任务 ; 由 于 每 个 人 的 专长 不 同 ， 完 成 各 项 
任务 的 效率 也 就 不 同 ， 于 是 产生 了 应 指派 哪个 人 去 完成 娜 项 任务 ， 才 能 使 完成 mn 
项 任务 总 的 效率 最 高 (所 需 总 时 间 最 少 ) 的 问题 。 这 类 问题 称 为 指派 问题 或 分 派 
问题 (assignment problem) 。 


%.4.1 指派 问题 的 数学 模型 


对 应 每 个 指派 问题 都 有 一 个 已 知 的 效率 矩阵 ， 其 元 素 cj>=0(ij = 1,2，…,n) 
表示 第 ;个 人 完成 第 7 项 任务 的 效率 (如 时 间或 成 本 等 ) 。 引 入 0-1 变量 xj: 
， -f 指派 第 ; 人 去 完成 第 / 项 任务 


0 不 指派 第 上; 人 去 完成 第 7 项 任务 
于 是 问题 的 数学 模型 是 ; 
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zj=1 (=1,2……m) 
= 


网 | 1 2 有 
名 2 (7 ) 


,=0 或 1 
第 一 个 约 东 条件 说 明 第 ;i 个 人 只 能 完成 一 项 任务 ， 第 二 个 约束 条 件 说 明 第 7 项 
任务 只 能 由 一 个 人 去 完成 。 从 指派 问题 的 数学 模型 可 以 看 出 ， 指 派 问题 是 0-! 
规划 的 特例 ， 也 是 运输 问题 的 特例 。 既 然 如 此 ， 指 派 问题 自然 可 以 用 整数 规划 
或 运输 问题 的 求解 方法 去 求解 ; 然而 ， 利 用 指派 问题 的 特点 有 更 简便 的 求解 
方法 。 

分 派 问题 是 0-1 规划 问题 ， 匈 牙 利 法 是 解决 分 派 问题 的 一 种 有 效 方法 。1955 
年 库 恩 (kuln) 利 用 匈牙利 数学 家 克 尼 格 (Konig) 的 关于 矩阵 中 独立 “0” 元 素 的 
定理 ， 提 出 了 求解 指派 问题 的 一 种 方法 ， 习 惯 上 称 之 为 匈牙利 法 。 匈 牙 利 法 的 基 
本 原理 就 是 “效率 矩阵 的 任 一 行 (或 列 ) 减 去 (或 加 上 ) 任 一 常数 ， 指 派 问题 的 最 
优 解 不 会 受到 影响 ”。 


9.4.2 分 派 问题 的 转换 及 AssignProb 函数 


为 便于 MATLAB 的 0-1 规划 Bintprog 函数 求解 ， 我 们 可 以 将 分 派 问题 变 为 标 
准 的 0-1 规划 问题 。 可 以 将 矩阵 变量 x， 按 行 拉 成 向 量变 量 zo 。 将 矩阵 系数 c， 
按 行 拉 成 向 量 系数 cy 。 

ZX0 = (xndi-i) yi) 1 厅 =1, 2 
C1 =(cnadi-Dtj) JJ=1,2， 7 


隆基 玫 


min z = 全 om 
8, 十 Xiui-l) 三 1，1=1，2，…， 必 
名 7+mfi 一 1) 
Meat-D =1， =1，2， 必 ， 玫 
xi =0 或 1 


其 中 ， is-b =1，i=1,2,，.n， 每 行 只 能 有 一 个 元 素 为 1， 即 每 个 人 只 能 
完成 一 项 任务 ; - 

立 mo- =1, 7=12，in， 每 列 只 能 有 一 个 元 素 为 1， 即 每 项 任务 只 能 由 一 
个 人 来 完成。 
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根据 上 述 算法 我 们 编写 了 AssignProb， 便 于 读者 使 用 AssignProb 间接 调用 
bintprog 函数 求解 分 派 问题 。 
AssignProb 本 数 代码 ( 见 AssignProb. m) ; 
function [AP,fval ,exitflag ,output] = AssignProb(C) 
9 code by ariszheng 
和 % email : ariszheng@ gmail_ com 
和 %this function is to solve Assignment Problem 
2 Input 
和 C is the AP matrx，the rowNum of C is the WorkerNum ，and the colNum 
力 of C is workNum 
和 ouput : 
和 AP: is the Assignment Probljem Matrix 
[rowNum ,ColNum] =size(C ) ; 
这 rowNum ”= ColNum 

error( "the Assignment Problem Matrix error”) ; 
end 
f= reshape(C "” ,1 ,rowNum * ColNum ) ; 
AeqRow = zerogs(rowNum ,rowNum * ColNum ) ; 
for i= 1 :rowNum 

for j =1:ColNum 

AeqRow(i,ColjNum* (i-1) +j) =1; 

end 
end 
AeqCol = zeros{ ColNum ,rowNum * ColNum ) ; 
for j =1:ColNum 

for i=1l:rowNum 

AeqCol(j,ColNum* (i-1)+j) =1; 

end 
end 
Aeq = [ AeqRow; 

AeqCol ] 
beq = ones(1 ,rowNum + ColNum) 
[x,fval,exidlag,output] = bintprog(f,[ ] ，[ ] ，Aeq，begq) 
AP = reshape(x,rowNum ,ColNum) " ; 
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画 数 语法 : 
[AP,fval ,exitflag ,output] = AssignProb(C ) 
本 数 输入 : 
C: 分 派系 数 和 矩阵 (输入 的 分 派 矩 阵 必须 为 方 阵 ) 
本 数 输出 : 
Fval: 最 优 分 派 矩 阵 对 应 的 函数 值 
Exitftiag: 算法 结束 信息 
1: 算法 收敛 
0: 算法 达到 最 大 迭代 次 数 
-2: 目标 问题 无 解 
-4: 算法 搜索 节点 达到 最 大 节点 数 
-5: 算法 达到 最 大 的 迭代 时 间 
-6: 算法 求解 LP( 线 性 规划 ) 次 数 达到 最 大 次 数 
Output: 函数 和 迭代 信息 


9.4.3 AssignProb 函数 示例 (1) 


例如 : 某 装修 公司 有 甲 、 乙 、 丙 、 丁 、 友 5 个 装修 队 。 现 在 公司 接 到 5 项 装 
修 任务 A、B、C、D、E。 根 据 经 验 ， 各 个 装修 队 完 成 不 同 的 任务 所 需要 的 时 间 
如 表 9-1 所 示 。 





如 何 分 派 可 以 使 得 总 用 时 最 少 ? 
对 以 上 分 派 问题 建立 模型 : 
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=0 或 1 
其 中 约束 的 意义 为 可 行 解 和 矩阵， 每 行 只 能 有 一 个 元 素 为 1， 即 每 个 人 只 能 完成 一 
项 任务 ;每 列 只 能 有 一 个 元 素 为 1， 即 每 项 任务 只 能 由 一 个 人 来 完成 。 

32 17 34 36 25 


21 31 21 22 19 
分 派系 数 矩 阵 为 ， c=|24 29 40 28 39 
26 35 4!1 33 29 


33 27 31 42 22 

编程 Matlab 程序 见 testAP1. m 
-  C=[32,17 ,34 ,36 ,25; 

21 ,31 ,21 ,22 ,19 ; 

24 ,29 ,40 ,28 ,29 ; 

26 ,35 ,41 ,33 ,29; 

33 ,27 ,31 ,42 ,22] 
[AP,fval,exitlag,output] = AssignProb(C) 


计算 结果 ; 

Optimization terminated. 

AP = 
0 1 0 0 0 
0 0 1 0 0 
0 0 0 1 0 
] 0 0 0 0 
0 0 0 0 1 

fval =114 

exitlag =1 

output = 

iterations: 35 


nodes : 1 
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time: 0. 0901 
algorithm: ”LP-based branch-and-bound 
branchStrategy : ” maximum integer infeasibility 
nodeSrchStrategy : ” best node search” 
message: ” Optimization terminated, 


9. 4.4 AssignProb 函数 示例 (2) 


例如 ， 由 甲 、 乙 、 丙 、 丁 4 个 人 完成 5 项 任务 A、B、C、D、E。 根 据 经 验 ， 
每 个 人 完成 任务 的 时 间 如 表 9-2 所 示 。 





如 何 分 派 可 以 使 得 总 用 时 最 少 ? 
虚设 1 人 为 戌 ， 把 戊 完成 A、B、C、D、 下 任务 所 需 时 间 设 为 所 有 人 完成 该 
任务 用 时 最 少 的 那个 人 所 用 时 间 ， 系 数 矩 阵 如 表 9-3 所 示 。 
表 93 





编程 Matlab 程序 见 testAP2. m 

C=[5,9,11,22,17; 
24,23,11,5,18; 
14,7,8,20 ,12; 
4,22,16,3 ,25; 
4,7;8,3,12] 
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[AP,fval,exitlag ,output] = AssignProb(C) ， 


计算 结果 : 
Optimization terminated. 
AP = 
1 0 0 0 0 
0 0 1 0 0 
0 0 0 0 1 
0 0 0 1 0 
0 1 0 0 0 
fval =38 
exitflag = 1 
outpnut = 
iterations:; 12 
nodes:; 1 
time: 0. 0300 


algorithm: ” LP-based branch-and-bound 
branchStrategy: ” maximum integer infeasibility” 
nodeSrchStrategy : ” best node search” 
message; ” Optimization terminated. ” 
分 派 方案 如 表 94 所 示 。 





9. 4.5 ”AssignProb 函数 示例 (3) 


上 述 问 题 (2) 为 人 数 小 于 任务 数 ， 即 有 一 人 完成 多 项 任务 ， 可 以 通过 虚设 
人 ,增加 人 数 的 方法 将 其 变 成 标准 的 分 派 问题 ; 同样 ， 当 任务 数 小 于 人 数 ， 即 有 
人 空闲 ， 可 以 通过 虚设 任务 的 方法 将 其 变 成 标准 的 分 派 问题 。 

例如 ， 由 甲 、 乙 、 两 、 丁 , 戊 5 个 人 完成 4 项 任务 A，B，C，D。 根 据 经 
验 ， 每 个 人 完成 任务 的 时 间 如 表 9-5 所 示 。 
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另外 ， 由 于 某 种 原因 ， 甲 必须 分 到 一 项 任务 ， 丁 不 能 承担 任务 D， 求 满足 这 
些 条 件 如 何 分 派 可 以 使 得 总 用 时 最 少 ? 

解 : 虚设 任务 下， 甲 不 能 轮空 ， 丁 不 能 承担 任务 D， 得 到 新 的 系数 矩阵 ， 如 
表 9-6 所 示 。 





注释 : ( 甲 ,E) 、( 丁 ,D) 本 应 为 无 穷 大 ， 由 于 要 用 计算 机 计算 ， 所 以 给 定 一 
个 相对 其 他 数 较 大 的 数据 即 可 。 
编程 Matlab 程序 见 testAP3. m 
C=[10,2,3,15 ,9; 

5,10,15,2 ,4; 

15,5 ,14,7,15; 

20,15 ,13 ,1000 ,8; 

1000 ,0,0,0,0] 
[AP,fval ,exitlag ,output] = AssignProb(C) 
计算 结果 ; 
Optimization terminated 
AP = 
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fval =21 
.exitflag =1 
output = 
iterations: 21 
nodes: 1 
time: 0. 0200 


algorithm:"LP-based branch-and-bound， 
branchStrategy : " maximum integer infeasibility， 
nodeSrchStrategy ; " best node search， 
message: "Optimization terminated, ， 
分 配方 案 如 表 9-7 所 示 。 





丁 轮空 ， 最 小 用 时 为 21。 


第 10 章 目标 规划 


在 科学 研究 、 经 济 建 设 和 生产 实践 中 ， 人 们 经 常 遇 到 一 类 含有 多 个 目标 的 数 
学 规划 问题 ， 我 们 称 之 为 多 目标 规划 。 本 章 介绍 一 种 特殊 的 多 目标 规划 ， 叫 目标 
规划 ( Goal Programming) ， 这 是 美国 学 者 Charnes 等 在 1952 年 提出 来 的 。 目 标 规 
划 在 实践 中 的 应 用 十 分 广泛 ， 它 的 重要 特点 是 对 各 个 目标 分 级 加 权 与 逐 级 优化 ， 
这 符合 人 们 处 理 问 题 要 分 轻重 缓急 、 保 证 重点 的 思考 方式 。 

本 章 分 目标 规划 模型 、fgoalattain 王 数 两 个 部 分 进行 介绍 。 其 中 fgoalattain 函 
数 是 MATLAB 求解 的 主要 函数 。 


10.1 目标 规划 模型 


10.1.1 问题 提出 


为 了 便于 理解 目标 规划 数学 模型 的 特征 及 建 模 思 路 ， 我 们 首先 通过 一 个 简单 
的 例子 来 说 明 。 
例 : 某 公司 分 厂 用 一 条 生产 线 生 产 两 种 产品 A 和 B ， 每 周 生 产 线 运行 时 间 
为 60h， 生 产 一 台 A 产品 需要 4h， 生 产 一 台 B 产品 需要 6h。 根 据 市 场 预测 ，A、 
B 产品 平均 销售 量 分 别 为 每 周 9 台 、8 台 ， 它 们 的 销售 利润 分 别 为 12 万 元 、18 
万 元 。 在 制定 生产 计划 时 ， 经 理 考虑 下 述 4 项 目标 : 首先 ， 产 量 不 能 超过 市 场 预 
测 的 销售 量 ; 其 次 ， 工 人 加 班 时 间 最 少 ; 第 三 ， 和 希望 总 利润 最 大 ; 最 后 ， 要 尽 可 
能 满足 市 场 需求 ， 当 不 能 满足 时 ， 市 场 认 为 B 产品 的 重要 性 是 A 产品 的 2 倍 。 
试 建立 这 个 问题 的 数学 模型 。 
讨论 : 
若 把 总 利润 最 大 看 作 目 标 ， 而 把 产量 不 能 超过 市 场 预 测 的 销售 量 、 工 人 加 班 
时 间 最 少 和 要 尽 可 能 满足 市 场 需求 的 目标 看 作 约 束 ， 则 可 建立 一 个 单 目标 线性 规 
划 模 型 。 
设 决策 变量 x ，x: 分 别 为 产品 A，B 的 产量 ， 则 
maxZ=12x, +18x: 
s.tL 4x +6x: 三 60 
xi s9 
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x2 三 8 

Xi ，X%2 三 0 
容易 求 得 上 述 线性 规划 的 最 优 解 为 (9,4) " 到 (3,8) " 所 在 线段 上 的 点 ， 最 优 目标 
值 为 Z” =180 万 元 ， 即 可 选 方案 有 多 种 。 

在 实际 上 ， 这 个 结果 并 不 完全 符合 决策 者 的 要 求 ， 它 只 实现 了 经 理 的 第 一 、 
二 、 三 条 目标 ， 而 没有 达到 最 后 一 个 目标 。 进 一 步 分 析 可 知 ， 要 实现 全 体 目标 是 
不 可 能 的 。 

下 面 我 们 结合 上 例 介绍 目标 规划 模型 。 


10.1.2 目标 规划 模型 的 基本 概念 


我 们 把 上 例 中 的 4 个 目标 表示 为 不 等 式 ， 仍 设 决策 变量 am ，a 分 别 为 产品 
A，B 的 产量 。 那 么 ， 

第 一 个 目标 为 : mi 和 9，x 三 8; 

第 二 个 目标 为 : 4x, +6xz <60; 

第 三 个 目标 为 : 希望 总 利润 最 大 ， 要 表示 成 不 等 式 需要 找到 一 个 目标 上 界 ， 
这 里 可 以 估计 为 232(12 x9 +18 x8) ， 于 是 有 12x, + 18x, 三 252; 

第 四 个 目标 为 : zx 9，x: 三 8。 

下 面 引入 与 建立 目标 规划 数学 模型 有 关 的 概念 。 

(1) 正 、 负 偏差 变量 d” ，d - 。 我 们 用 正 偏 差 变 量 4 表示 决策 值 超过 目标 
值 的 部 分 ; 负 偏 差 变量 4 - 表示 决策 值 不 足 目标 值 的 部 分 。 因 决策 值 不 可 能 既 超 
过 目标 值 同时 又 未 达到 目标 值 ， 故 恒 有 d” xd- =0 。 

(2) 绝对 约束 和 目标 约束 。 我 们 把 所 有 等 式 、 不 等 式 约束 分 为 两 部 分 : 绝 
对 约束 和 目标 约束 。 

绝对 约束 是 指 必须 严格 满足 的 等 式 约束 和 不 等 式 约束 。 如 在 线性 规划 问题 中 
考虑 的 约束 条 件 ， 不 能 满足 这 些 约 束 条 件 的 解 称 为 非 可 行 解 ， 所 以 它们 是 硬 约 
束 。 设 举例 中 生产 A，B 产品 所 需 原 材料 数量 有 限制 ， 并 且 无 法 从 其 他 渠道 予以 
补充 ， 则 构成 绝对 约束 。 

目标 约束 是 目标 规划 特有 的 ， 我 们 可 以 把 约束 右 端 项 看 作 要 努力 追求 的 目标 值 ， 
但 允许 发 生 正 负 偏差 ， 在 约束 中 加 入 正 、 负 偏差 变量 来 表示 ， 于 是 称 它们 是 软 约 训 。 

对 于 上 例 ， 我 们 有 如 下 目标 约束 ; 

@x +di -dr =9 

@xa + 中 - 心 =8 

G@4x, +6x: + 由 -dd =60 
@12x, +18x, +dy -di =252 
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(3) 优先 因子 与 权 系数 。 对 于 多 目标 问题 ， 设 有 工 个 目标 函数 万, 万 ，…， 
万， 决策 者 在 要 求 达到 这 些 目 标 时 ， 一 般 有 主 次 之 分 。 为 此 ， 我 们 引入 优先 因子 


己 ， 1i=1，2，…，L 工 。 不 妨 设 预期 的 目标 函数 优先 顺序 为 用， 态 5 万 ， 我 们 把 
要 求 第 一 位 达到 的 目标 赋 于 优先 因子 已 ， 次 位 的 目标 赋 于 优先 因子 己 ，…， 并 
规定 已 闪 Pi=1，2，…, 卫 -1。 即 在 计算 过 程 中 ， 首 先 保 证 已 级 目标 的 


实现 ， 这 时 可 不 考虑 次 级 目标 ; 而 已 级 目标 是 在 实现 书 级 目标 的 基础 上 考虑 
的 ， 依 此 类 推 。 当 需要 区 别 具 有 相同 优先 因子 的 若干 个 目标 的 差别 时 ， 可 分 别 赋 
于 它们 不 同 的 权 系 数 ww。 优 先 因 子 及 权 系 数 的 值 均 由 决策 者 按 具 体 情 况 来 确定 。 
《4) 目标 规划 的 目标 函 效 。 目 标 规划 的 目标 函数 是 通过 各 目标 约束 的 正 、 
负 偏 差 变量 和 赋 于 相应 的 优先 等 级 来 构造 的 。 决 策 者 的 要 求 是 尽 可 能 从 某 个 方向 
缩小 偏离 目标 的 数值 。 于 是 ， 目 标 规 划 的 目标 函数 应 该 是 求 极 小 : min f= 太 (ad * ， 
d - ) 。 其 基本 形式 有 以 下 三 种 : 
1) 要 求 恰 好 达到 目标 值 ， 即 使 相应 目标 约束 的 正 、 负 偏差 变量 都 要 尽 可 能 
地 小 。 这 时 取 min(d” +d- )。 
2) 要 求 不 超过 目标 值 ， 即 使 相应 目标 约束 的 正 偏 差 变量 要 尽 可 能 地 小 。 这 
时 取 min(d” ) 。 
3) 要 求 不 低 于 目标 值 ， 即 使 相应 目标 约束 的 负 偏差 变量 要 尽 可 能 地 小 。 这 
时 取 min(d  )。 
对 于 上 例 ， 我 们 根据 决策 者 的 考虑 知 : 
第 一 优先 级 要 求 min(d + 必 )。 
第 二 优先 级 要 求 min(d ) 。 
第 三 优先 级 要 求 min(dy )。 
第 四 优先 级 要 求 min(dr +2d; ) 。 这 里 ， 当 不 能 满足 市 场 需求 时 ， 市 场 认 为 
B 产品 的 重要 性 是 A 产品 的 2 倍 ， 即 减少 B 产品 其 影响 是 A 产品 的 2 人 悦 ， 因 此 
我 们 引 人 和 人 了 2: 1 的 权 系数 。 
综合 上 述 分 析 ， 我 们 可 得 到 下 列 目标 规划 模型 
min=P(dr + 由)+Pdr +Pd +Pi(di +2d2 ) 
stL xi +d 一 d =9 
xz 二 di -d =8 
4xi +6xs + 中 -一心 =60 
12x +18x, +d2 -dr =252 
2 de CE PPp0O al 2 3 4 
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-一 


10.1.3 ”目标 规划 模型 的 一 般 形式 
根据 上 面 讨论 ， 我 们 可 以 得 到 目标 规划 的 一 般 形式 如 下 : 
min 人 Pi[ > 《27G 十 芭 下 引 )] 


3. 芋 cx +dr -由 =g 大 =1) 2 天 
(LGP) 名 好 生 稚 自 和 


> axi =( 生 ，)0， 1 二 1 ,2 ,… ,7 
J=1 


2 人， 帮 二 0， 了 =1;, 2 ,2，… 和 天 
(LGP) 中 的 第 二 行 是 久 个 目标 约束 ， 第 三 行 是 mm 个 绝对 约束 ，cs 和 &x 是 目 
标 参 数 。 
10.1.4 利用 linprog 函数 求解 目标 规划 


这 里 以 10. 1. 1 中 的 例子 作为 程序 示例 : 
min f=Pi(dzi + 上 )+Pd +Pde +PeCdi +2d: ) 
st xl+d  -d=9 
x+d 一 由 =8 
4x, +6x: + 中 -中 =60 
12x, +18x: +du -dr =252 
xz， 人， 人 入 0, =1，2，3，4 
为 了 便于 编程 我 们 将 
di = 和 ‰a， 必 = 和 
必 = 条 ， 中 =56， 
四 = 和 好， 中: 三 项 
di =xg，du =%m 
xiE0，i=3，4，…，10 
原 问 题 变 为 标准 的 约束 优化 问题 
min 三 = P (xs +x6) + P2xs + Paxe + 已 (xs 十 2x5 ) 
as.t Xi +%3 一 X4 =9 
X7 二 MX5 一 %6 =8 
4xi +6x +x7 -xs =60 
12x, +18x。 + xs 一 Xio =252 
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。 
Xi EBP0，i=1，2，…，10 
利用 linprog 函数 的 求解 步骤 为 : 
设 P=[1000,100,10,1] 

三 = 已 (ze +x6) +P2xas +P3xo +P(xs +2x5) 
= Px3 + Pixs 十 2P4xs 十 已 ,x6 + Pa2xs + P3x9 
=%a +1000xs +2xs +1000xs +100xs + 10xs 

调用 linprog 函数 求解 solvefgoalMyfun1. m 
9% solvefgoalMyfunl 
F = [0,0,1,1000,2,1000,0,100,10,0] 
名 等 式 约束 系数 矩阵 
Aeq=[1,0,1,-1,0,0,0,0,0,0; 
0,1,0,0,1, -1,0,0;0,0; 
4;,6,0,0,0,0,1,-1;0,0; 
12,18,0,0,0,0,0,0,1， -1]; 
% 等 式 约束 常数 向 量 
beq = [9;8;60;252] ; 
多 可 行 解 下 界 
lb = zeros(1,10) ; 
[x,fval,exitlag,outputj =]linprog(F,[ ]， []， Aeq， beq， 了 hb， []) 
计算 结果 : 
Optimization terminated. 
X 三 
3. 0000 
8. 0000 
6. 0000 
0. 0000 
0. 0000 
0. 0000 
0. 0000 
0. 0000 
72. 0000 
0. 0000 
fval =726. 0000 
exitflag =1 
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outpnut = 

iterations; 7 

algorithm : 'large-scale : interior point ' 

cgiterations: 0 

message: Optimization terminated.， ' 
最 优 解 为 x=[3,8] 
如 果 目 标 函 数 或 者 约束 函数 中 含有 非 线 性 方程 ， 则 可 以 用 求解 非 线性 约束 问 

题 的 fmincon 函数 对 其 进行 求解 。 


10. 2 ”fgoalattain 杖 数 


MATLAB 提供 一 种 内 置 函数 foalattain， 为 求解 目标 规划 问题 ， 但 其 目标 规 
划 模 型 相对 简单 。 对 每 个 目标 只 引 和 人 一 个 松弛 变量 y>， 而 且 没 有 涉及 同 优 先 级 式 
不 同 变量 的 权重 问题 。 
fgoalattain 函数 计算 模型 为 : 
和 
st 下 () -pe 襄 jty 一 SOG1 
cr) <0 
ceg(zY) =0 
4Y < 
4egr =beg 
太 三 x 三 地 
这 里 zx,， 五 ，5eg ， 功 ， 玛 ，meigji 为 向 量 ，4 与 4ey 为 矩阵 ，Z(z) 为 目标 函数 ， 
c(r) ，ceg(z) 为 非 线性 约束 ，4zr 大 5，4egr = jeg 为 线性 约束 ， 西 二 xz 三 磷 为 可 
行 解 的 区 间 约 束 。 
多 目标 优化 同时 涉及 一 系列 对 象 。fgoalattain 函数 求解 该 问题 的 基本 算法 是 
目标 达到 法 。 该 方法 为 目标 函数 建立 起 目标 值 。 多 目标 优化 的 具体 算法 在 前 面 进 
行 了 更 详细 的 介绍 。 在 本 次 实现 过 程 中 ， 使 用 了 松弛 变量 y 作为 模糊 变量 ， 同 时 
”最 小 化 目标 向 量 R(xz); 8g8oaf 参数 是 一 系列 目标 达到 值 。 在 进行 优化 之 前 ， 通 常 
不 知道 对 象 是 否 会 达到 目标 。 使 用 权 向 量 weig 生 可 以 控制 是 没有 达到 还 是 溢出 。 
fgoalattain 函数 使 用 序列 二 次 规划 法 (SQP) ， 算 法 中 对 于 一 维 搜索 和 Hessian 和 矩阵 
进行 了 修改 。 在 一 维 搜索 中 ， 对 精确 目标 郴 数 ， 当 有 一 个 目标 函数 不 再 发 生 改善 
时 ， 一 维 搜索 终止 。 修 改 的 Hessian 矩阵 借助 于 本 问题 的 结构 ， 也 采用 attainfac- 
tor 参数 ， 包 含 解 出 的 y 值 。y 取 负 值 时 表示 目标 滋 出 。 
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函数 语法 : 
x= 人 goalattain( fun ,x0 ,goal,weight) 
x=goalattain(fon ,x0 ,goal,weight,A,b) 
X = fgoalattain( fun ,x0 ,goal ,weight,A,b,Aeq,beq) 
x = 名 oalattain(fon,xz0 ,goal,weight,A,b,Aeqg,beq, 功 ,中 ) 
x=fgoalattain( fun ,x0 ,goal ,weight,A,b,Aeq,beq,jb,ub,nonlcon) 
x = 人 goalattain(fun ,x0 ,goal ,weight,A,b,Aeq,beq,]b,ub,nonlcon,… options) 
[x,fval] = fgoalattain( …) 
[x,fval ,attainfactor] = fgoalattain(… ) 
[x,fval ,attainfactor ,exitftlag ] = fgoalattain( … ) 
[x,fval ,attainfactor,exitflag ,output] = fgoalattain( …) 
[ x,fval ,attainfactor,exitflag ,output,]ambda] = fgoalattain( … ) 


Goal: 目标 希望 达到 的 向 量 值 
Weight: 目标 权 系数 
A: 线性 不 等 式 约束 系数 矩阵 
B: 线性 不 等 式 约 束 的 常数 向 量 
Aeq: 线性 等 式 约束 系数 矩阵 
Beq: 线性 等 式 约束 的 常数 向 量 
jb: 可 行 区 域 下 界 
Ub: 可 行 区 域 上 界 
Nonlcon: 非 线性 约束 
Options: 优化 参数 设置 : 
优化 参数 选项 。 你 可 以 用 optimset 函数 设置 或 改变 这 些 参 数 的 值 ， 具 体 可 以 参看 
附录 : MATLAB 优化 工具 箱 参 数 设 置 。 
函数 输出 : 
X: 最 优点 (或 者 结束 迭代 点 ) 
Fval:， 最 优 值 ( 或 者 结束 和 迭代 点 对 应 的 本 数 值 ) 
Attainfactor: attainfactor 变量 是 超过 或 低 于 目标 的 个 数 。 若 attainfactor 为 负 ， 则 目 
标 已 经 溢出 ; 若 attainfactor 为 正 ， 则 目标 个 数 还 未 达到 。 
Exitflag : 迭代 停止 标识 
1: 算法 收敛 停止 
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4:; 搜索 方向 的 范 数 小 于 给 定 的 误差 控制 参数 

5: 梯度 (导数 ) 范 数 小 于 给 定 的 误差 控制 参数 

0: 算法 达到 最 大 迭代 次 数 

-1:; 算法 由 output function 终止 

-2: 未 找到 可 行 解 

Output : 算法 输出 (算法 计算 信息 等 ) 

Ambda: 最 优点 (或 者 结束 迭代 点 ) 拉 格 朗 日 乘 子 


10.2.1 函数 示例 (1) 


某 化 工厂 拟 生产 两 种 新 产品 A 和 B， 其 生产 设备 费用 分 别 为 : A，2 万 元 /ti 
B，5 万 元 /t。 这 两 种 产品 均 将 造成 环境 污染 ， 设 由 公害 所 造成 的 损失 可 折算 为 ; 
A，4 万 元 /t B，1 万 元 /t。 由 于 条 件 限制 ， 工 厂 生产 产品 A 和 了 的 最 大 生产 能 
力 各 为 每 月 St 和 6t， 而 市 场 需 要 这 两 种 产品 的 总 量 每 月 不 少 于 7t。 试 问 工厂 如 
何 安排 生产 计划 ， 在 满足 市 场 需 要 的 前 担 下， 使 设备 投资 和 公害 损失 均 达 到 
最 小 。 
该 工厂 决策 认为 ， 这 两 个 目标 中 环境 污染 应 优先 考虑 ， 设 备 投资 的 目标 值 为 
20 万 元 ， 公 害 损失 的 目标 为 12 万 元 。 
设 工 厂 每 月 生产 产品 A 为 办 ，B 为 ， 设 备 投资 费 为 请 (x*) ， 公 害 损失 费 为 
户 (x) ， 则 这 个 问题 可 表达 为 多 目标 优化 问题 : 
miny 
s.t， 2xl +Sx) 一 Wiy7 =20 
4xi +xa 一 W27 = 1 
XI s$ 
X2 之 和 
XI 十 22 三 7 
Xi ，xX2 全 0 
(1) 编写 目标 函数 的 M 文件 fgoalmyfun2. m 
fonction f= 人 oalmyfun2(x) 
ff(1)=2x*x(1)+S*x(2); 
f(2) =4*x(1) +x(2); 

(2) 调用 fgoalattain 郴 数 solveFgoal2. m 
免 给 定 目标 ， 权 重 按 目 标 比例 确定 ， 给 出 初 什 
goal =[20 12] ; 
weight = [20 12 ] ; 
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x0=[25]; 
色 给 出 约束 条 件 的 系数 
A=[10;01;-1 -1]; 
b=[56 -7]; 
jb =zeros(2,1); 
[x,fval , attainfactor, exitflag ] = fgoalattain ( @ fgoalmyfun2 , x0 , goal , weight ， 
A,b,[]，[]j, 了 b，[]) 
计算 结果 : 
Optimization terminated : magnitude of search direction less than 2 * options, TolX 
and maximum constraint violation ia less than options. TolCon. 
Active inequajities〈to within options. TolCon = le -006 ) ; 
]ower “ .upper ineqlin ”ineqnonjlin 
3 1 
2 
x=2.9167 4. 0833 
fval =26. 2500 ”15. 7500 
attainfactor =0. 3125 
exittlag =4 
故 工 厂 每 月 生产 产品 A 为 2.9167t，B 为 4. 0833t。 设 备 投资 费 和 公害 损失 费 
的 目标 值 分 别 为 26. 2500 万 元 和 15. 7500 万 元 。 达 到 因子 为 0.3125 ， 计 算 收敛 。 


10.2.2 函数 示例 (2) 


某 厂 生产 两 种 产品 A 和 B， 已 知 生 产 A 产品 100kg 需 8 个 工时 ， 生 产 了 产品 
100kg 需 10 个 工时 。 假 定 每 日 可 用 的 工时 数 为 40， 且 希望 不 雇 临 时 工 ， 也 不 加 
班 生产 。 这 两 种 产品 每 100kg 均 可 获 利 100 元 。 此 外 ， 有 个 顾客 要 求 每 日 供应 他 


”了 B 种 产品 600kg。 问 应 如 何 安排 生产 计划 ? 


设 生 产 A，B 两 种 产品 的 数量 分 别 为 mx 和 交 ( 均 以 100kg 计 ) ,为 了 使 生产 
计划 比较 合理 ， 要 求 用 人 尽量 少 ， 获 利 尽 可 能 多 ， 另 外 B 种 产品 的 产量 尽量 多 。 
由 题 意 建立 下 面 的 数学 模型 : 

miny 

s.t 8x, +10x: -2017 近 40 
= 100x; ~ 100x, -taoy 大 -800 
2x2 一 1W37yY<6 
8x, +10x: 三 40 
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xy 三 
2 ，0%o 20 
(1) 首先 需要 编写 目标 函数 的 M 文件 fgoalmyfun3. 四 ， 返 回 目标 计算 值 
function f= myfun(x) 
f(1) =8x*x(1)+10*x(2); 
f2) = -100*x(1) 一 100*x(2); 
f(3) = -x(2); 
(2) 调用 foalattain 函数 solveFgoal3. m 
多 给 定 目标 ， 权 重 按 目标 比例 确定 ， 给 出 初 值 
goal = [40 -800 -6]; 
weight = [40 -800 -6]; 
x=[22]; 
多 给 出 约束 条 件 的 系数 
A=f[810;0 -1]; 
b=[40; -6]; 
]hb = zeros(2,1) ; 
狗 设置 函数 评价 的 最 大 次 数 为 20000 次 
options = optimset(! MaxFunEvals',20000 ) ; 
[x, fval , attainfactor, exitflag ] = 如 oalattain ( @ fgoalmyfun3 , x0 , goal , weight， 
A,b,[]j，[]j， 耻 ，[]，[]，options) ; 
计算 结果 为 : 
X=2. 0429 1. 9458 
fval =35. 8007 -398. 8648 ” -1.9458 
attainfactor = --0. 0646 
exitiliag =0 
经 过 5000 次 迭代 以 后 ， 得 生产 A，B 两 种 产品 的 数量 各 为 204. 29kg 
和 194. 58kg。 
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最 大 最 小 (minimax) 问题 是 多 目标 规划 的 一 种 ， 其 多 个 目标 的 量 纲 相 同 可 以 
进行 比较 ， 最 大 最 小 的 意义 使 得 多 个 目标 值 中 最 大 的 那个 目标 值 最 小 化 。 例 如 ， 
如 果 存 在 关系 : 

万 三 户 三 … 太 
可 以 得 到 
min| max (用 大 ) 二 min 太 


1.1 最 大 最 小 问题 模型 


min | max〔〈 户 ， 户 ，…， 矿 )| 
s.L hi(z) =0，i=1，2，…，mm 
8i(Z) <0,，J=1，2，…， 
其 中 乒 , 户 ，…， 大 为 多 个 目标 的 目标 函数 ， 访 (zx) 为 等 式 约 束 ( 线 性 或 非 线 性 等 
式 约 束 ) ，g(z) 为 不 等 式 约束 ( 线 性 或 非 线性 不 等 式 约束 ) 。 
最 小 最 大 模型 变 为 最 大 最 小 模型 的 转换 方式 : 
max|min (及 , 户 ，… 天 )| 
一 min| -min (所 ,… 拓 )} 
一 min{max ( 一 户 ，- 户 ，……， 一 矿 ) | 
例 : 计划 在 A，B，C，D，E 五 个 城市 之 间 建 造 一 个 垃圾 处 理 厂 P〈 见 图 11-1) ， 
漠 


CD)^ CD) B 和 
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为 了 使 五 个 城市 将 垃圾 运往 垃圾 处 理 厂 P 的 运输 成 本 尽 可 能 相差 不 大 。 由 于 运 ， 
输 成 本 主要 由 城市 与 垃圾 处 理 厂 之 间 的 距离 决定 ， 所 以 垃圾 处 理 厂 P 的 选 址 目 
标 是 使 得 五 个 城市 到 垃圾 处 理 厂 P 的 距离 尽量 相近 。 城 市 坐标 如 表 11-1 所 示 。 


表 11-1 
城 市 x 坐标 7 坐标 


解 : 由 平面 距离 公式 可 得 ; 
矿 =de=WVz-L5)7+(7-6G8) 
万 =daw=V(z-6.0)5+(7-7.0) 
户 =dee=V(z-8.9)5+(7-6.9) 
所 =doe=V(z-3.5)5+(Y-4.0) 
矿 =d =WVizs-74)2+(7-3175 
目标 函数 为 ; 
min{ max ( 帮 ， 户 ，…， 万) | 


11.2 fminimax 函数 


fminimax 本 数 计算 模型 ; 
minimax ( 扩 (z) ,万 (z) ，…， 拓 (z))] 
st cz)<0 
cedg(x) 一 0 


这 里 x，8，beg， 硬 ， 砚 为 向 量 ，4 与 4eg 为 矩阵 ，.F(x) 为 目标 函数 ，c(z)， 
ceg(z) 为 非 线 性 约束 ，4r 大 p，4e9gx = beg 为 线性 约束 ， 耳 二 z 天 友 为 可 行 解 的 
区 间 约 束 。 
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fminimax 函数 使 用 的 约束 优化 算法 都 是 目前 比较 普 适 的 有 效 算 法 ， 主 要 使 用 
序列 二 次 规划 (Sequential Quadratic Programming,SQP) 算 法 。 由 于 这 些 算 法 都 具有 
一 定 的 复杂 性 ， 具 体 算 法 这 里 不 再 详 述 。 

函数 语法 ; 
x=fminimax(fnn ,x0) 
x=fiminimax(fion,x0,A,b) 
x=fminimax(fun,x,A,b,Aeq,beq) 
x=fminimax(fan,x,A,b,Aeq,beqa,jb,ub) 
x=fminimax(fun,x0,A,b,Aeq,beq,lb,ub,nonlcon) 
x=fminimax(fun ,x0 ,A,b,Aeq,beq,ib,ub ,nonlcon ,options) 
[x,fval] =fminimax( …) 

[x,fval ,maxfval ] = fminimax( …) 
[x,fval ,maxfval ,exitflag] = fminimax(…) 
[x,fval ,maxfval ,exitfag ,output] = fminimax(…) 
[x,fval ,maxdfval ,exitflag ,output ,lambda] = fminimax( …) 
本 数 输入 ; 
Fun: 目标 函数 
X0: 初始 迭代 点 
A: 线性 不 等 式 约 束 系数 矩阵 
B: 线性 不 等 式 约 束 的 常数 向 量 
Aeq: 线性 等 约束 系数 矩阵 
Beq: 线性 等 式 约 束 的 常数 向 量 
jb: 可 行 区 域 下 界 
Ub: 可 行 区 域 上 界 
Nonlcon， 非 线性 约束 
Options: 优化 参数 设置 
本 数 输出 : 
X: 最 优点 (或 者 结束 和 迭 代 点 ) 
Fval: 最 优 值 ( 或 者 结束 和 迭代 点 对 应 的 函数 值 ) 
Maxfval: 最 大 算数 值 
FExittlag: 迭代 停止 标识 
1: 算法 收敛 停止 
4: 搜索 方向 的 范 数 小 于 给 定 的 误差 控制 参数 
5: 梯度 (导数 ) 范 数 小 于 给 定 的 误差 控制 参数 
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0: 算法 达到 最 大 迭代 次 数 

-1:; 算法 由 output function 终止 

-2: 未 找到 可 行 解 

Output : 算法 输出 (算法 计算 信息 等 ) 

Ambda: 最 优点 (或 者 结束 迭代 点 ) 拉 格 朗 日 乘 子 


11.2.1 函数 示例 (1) 
求解 最 大 最 小 问题 
minj max (万 太太 )| 
斤 =du=V(z-15)7+(Y-6.8) 
万 =da pe=VOz-6.0)7+(Y-7.0)7 
户 =dcee=V(z-8.9)7+(Y-6.9)7 
所 =d =V(xz-3.5)7+(y-4.0)5 


万 =de pp=V(x -7.4)5+ (7y -3. 1) 
编写 目标 郴 数 minimaxMyfun. m 
function f= minimaxMyfun(x) 
f=zeros(1,5) ; 
f(1) =sqrt((x(1) -1.5) 人 2+(x(2) -6.8)22); 
f(2) =sqrt((x(1) -6.0)2+(x(2) -7.0)2); 
f(3) =sqrt((x(1) -8.9)2+(x(2) -6.9)2); 
f(4) =sqrt((x(1) -3.5) 人 2+(x(2) -4.0)22); 
f($) =sqrt((x(1) -7.4)2+(x(2) -3.1)22); 
调用 fminimax 枉 数 showfminimax1. m 
options = optimset( " display”，iter”) ; 
多 显示 迭代 过 程 
x0=[0.0; 0.0]; 
多 初 始 和 迭代 点 
[x,fval,maxfval ,exitlag ,output,lambda] = fminimax( @ minimaxMyfun ,x0 ) 
Optimization terminated ， magnitude of search direction less than 2 * options. TolX 
and maximum constraint violation is less than options. TolCon. 
Active inequalities (to within options. TolCon = le - 006 ) : 
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]ower upper ineqlin ”ineqnonjin 
1 
， 
5 


5. 2093 
6. 1608 
fval =3. 7640 1. 1530 3. 7640 2. 7$51 3. 7640 
maxfval = 3. 7640 
exitflag =4 
output 二 
iterations， 7 
funcCount: 56 
]ssteplength:; 1 
stepsize: 3. 9107e-009 . 
algorithm: ” minimax SQP，Quasi-Newton ，line _search 
firstorderopt: [ ] 
message: [1xl42 char] 
lambda = 
lower: [2xl double] 
upper: [2xl double j 
eqlin:， [0xl double] 
eqnonlin: [0xl double ] 
ineqlin: [0xl double ] 
ineqnonlin: [0xl doublej] 
最 佳 垃圾 处 理 厂 的 建设 位 置 坐标 为 (5. 2093 ,6. 1608 ) 


1L2.2 函数 示例 (2) 


原 示 例 问 题 变 为 : 

计划 在 A，B，C，D,， 下 五 个 城市 之 人 间 建 造 一 个 垃圾 处 理 厂 P， 为 了 使 五 个 
城市 将 垃圾 运往 垃圾 处 理 厂 P 的 运输 成 本 尽 可 能 相差 不 大 。 由 于 运输 成 本 主要 
.由 城市 与 垃圾 处 理 厂 之 间 的 距离 决 怎 ， 所 以 垃圾 处 理 厂 P 的 选 示 目标 是 使 得 五 
个 城市 到 垃圾 处 理 厂 了 的 距离 尽量 相近 。 

另外 ，A，B，C，D,， 卫 五 个 城市 之 间 有 一 条 高 速 公路 ， 为 了 便于 垃圾 处 理 
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厂 的 垃圾 转运 方便 ， 垃 圾 处 理 厂 要 在 该 公路 边 上 建造 ， 如 图 11-2 所 示 。 该 公路 
在 图 上 的 坐标 线 为 : y=x* -2.5。 城 市 坐标 如 表 11-2 所 示 。 





表 11-2 
城 市 x 坐标 7 坐标 


该 问题 的 方程 为 : 
min{ max ( 帮 ， 户 二 请 )| 


st bi 一 22 =2.5 
=d =wVW(xz-l5)5+(y-6.8)5 
矿 = 四 = W(x -6.0)5 +(Yy=- 了 7.0) 
大 =d =Vzs-&9)J7+(7-G977 
六 md WV(xz -3.5)7+(y-4.0)5 
万 =d =W(xz-7.4) +(Y-3.1)5 
编写 目标 函数 minimaxMyfun. m 
function f= minimaxMyfun(x) 
f= zeros(1 ,5) ; 
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f(1) =sqrt((x(1) -1.5) 人 2 +(x(2) -6.8)2); 
区 2) =sqrt((x(1) -6.0)2+(x(2) -7.0)2); 
人 3) =sqrt((x(1) -8.9)2+(x(2) -6.9)22); 
f(4) =sqrt((x(1) -3.5) 人 2+(x(2) -4.0)2); 
f(5) =sqrt((x(1) -7.4)22+(x(2) -3.1)2); 
调用 fminimax 本 数 showfminimaxl. m 
options = optimset(' display '，iter ') ; 
%% 显示 迭代 过 程 
x0 =[0.0; 0.0]; 
和 初始 迭代 点 
Aeq=[1,-1]; 
beq =2. 5; 
[x,fval ,maxfval ,exitflag ,output,lambda ] = fminimax( @ minimaxMyfun,x0,[]，[ ]， 
Aeq，beq) 
计算 结果 ; 
Optimization terminated : magmitude of search direction less than 2 * options. TolX 
and maximurm constraint violation is less than options. TolCon. 
Active inequalities (to within options. TolCon = 1e-006 ) : 
]ower Upper ineqlin ”ineqnonlin 
1 


S. 4000 
2. 9000 
fval =5. $154 4. 1437 S. 3151 2. 1954 2.0100 
maxfval = 5. 5154 
exitflag =4 
output = 
iterations， 8 
funcCount: 53 
lssteplength:; 1 
stepsijze: 2. 0670e-006 
algorithm:， minimax SQOP，Quasi-Newton ，line search， 
firstorderopt: 「 ] 
message: [1x142 char] 
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]ambda = 
]ower: [2xl double ] 


upper: [2xl double ] 
eqlin， -0.7071 
eqnonlin: [0xl double] 
ineqlin: [0xl double] 
ineqnonlin: [0xl double] 
最 佳 垃圾 处 理 厂 的 建设 位 置 坐标 为 (5. 4000， 2. 9000) ， 在 公路 边 上 。 


第 12 章 层次 分 析 法 (AHP) 


在 实际 生活 中 ， 由 于 问题 中 含有 大 量 的 主 、 客 观 因素 。 许 多 要 求 与 期 望 是 模 
糊 的 ， 相 互 之 间 还 会 存在 一 些 矛 盾 。 所 以 ， 这 类 决策 问题 单纯 依靠 构造 一 个 数学 
模型 来 求解 往往 行 不 通 。 面 对 这 类 决策 问题 ， 运 筹 学 工作 者 进行 了 大 量 的 研究 ， 
寻求 不 同 的 方法 。 

美国 运筹 学 家 T. L. Saaty 教授 在 20 世纪 70 年 代 提 出 的 层次 分 析 法 (Analytic 
Hierarchy Process ，AHP) 是 处 理 这 类 问题 最 有 效 的 方法 之 一 。 以 TSaaty 为 首 
的 小 组 曾 成 功 把 层次 分 析 法 用 于 电力 计划 、 苏 丹 运 输 研究 、 美 国 高 等 教育 事业 
1985 ~ 2000 展望 、1985 年 世界 石油 价格 预测 等 重大 研究 项 目 上 。 

层次 分 析 法 的 主要 特征 是 ， 合 理 地 把 定性 与 定量 的 决策 结合 起 来 ， 按 照 思维 
心理 的 规律 把 决策 过 程 层 次 化 、 数 量化 。 

本 章 主 要 介绍 层次 分 析 法 的 基本 概念 与 MATLAB 求解 AHP 的 方法 。 


12.1 层次 分 析 法 的 基本 概念 


运用 层次 分 析 法 进行 决策 时 主要 分 四 个 步骤 : 

(1) 建立 系统 的 递 阶层 次 模型 。 

(2) 构造 两 两 比较 的 判断 矩阵 。 

(3) 针对 某 一 个 标准 〈 准 则 ) ， 计 算 各 被 支配 元 素 的 权重 。 
(4) 计算 当前 一 层 元 素 关于 总 目标 的 排序 权重 。 


12.1.1 建立 系统 的 递 阶层 次 模型 


利用 层次 分 析 法 解决 问题 ， 首 先是 建立 层次 结构 模型 。 这 一 步 必 须 建立 在 对 
问题 及 其 环境 充分 理解 、 分 析 的 基础 上 。 作 为 一 个 工具 ， 层 次 分 析 法 模型 的 层次 
结构 大 体 分 成 三 类 : 

第 一 类 : 最 高 层 ， 又 称 顶 层 、 目 标 层 。 这 层 只 有 一 个 元 素 ， 一 般 是 决策 问题 
的 预订 目标 或 理想 结果 。 

第 二 类 : 中 间 层 ， 又 称 准 则 层 。 这 一 层 可 以 有 多 个 子 层 ， 每 个 子 层 可 有 多 个 
元 素 ， 它 们 包括 所 有 为 实现 目标 所 涉及 的 中 间 环 节 。 这 些 环节 常常 考虑 的 是 需要 
考虑 的 准则 、 子 准则 。 
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第 三 类 : 最 底层 ， 又 称 措施 层 、 方 案 层 。 这 一 层 的 元 素 是 为 了 实现 目标 可 供 
选择 的 各 种 措施 、 决 策 或 方案 。 

我 们 称 层 次 分 析 结 构 模型 中 各 项 为 结构 模型 的 元 素 。 层 次 分 析 结 构 模 型 如 图 
12-1 所 示 。 





在 实际 建 模 过 程 中 有 以 下 几 点 需要 说 明 ， 

(1) 除 顶 层 和 底层 之 外 ， 各 元 素 受 上 层 某 一 个 或 某 些 元 素 的 支配 ， 同 时 又 
支配 下 层 的 某 些 元 素 。 

(2) 层次 之 间 的 支配 关系 可 以 是 完全 的 ， 也 可 以 是 不 完全 的 ， 即 某 元 素 只 
支配 其 下 层 的 某 些 元 素 ， 有 时 甚至 是 隔 层 支配 ， 例 如 图 12-2。 





(3) 递 阶层 次 结构 中 的 层 数 与 问题 的 复杂 程度 有 关 ， 一 般 不 受 限制 。 

《4) 为 了 避免 判断 上 的 困难 ， 每 个 层次 中 的 元 素 所 支配 的 下 层 元 素 一 般 不 
超过 9 个 。 若 实际 问题 中 元 素 所 支配 的 元 素 多 于 9 个 时 ， 可 将 该 层 分 成 若干 子 
层 。 
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根据 上 述 特征 ， 称 这 种 自 上 而 下 的 支配 关系 所 形成 的 层次 结构 为 递 阶层 次 结 
构 。 


12.1.2 构造 判断 矩阵 


当 一 个 递 阶 层次 结构 建立 以 后 ， 需 要 确定 一 个 上 层 元 素 zx ( 除 底层 外 ) 所 支 
配 的 下 层 若干 元 素 % ， 和 ，…，xm 关于 这 个 z 的 排序 权重 。 这 些 权重 ， 疡 ， 


…， 常常 表示 为 百分数 ， 即 满足 0<pPi<1, 且 m = 1 。 


要 直接 确定 这 些 权重 ， 一 般 是 很 末 难 的 ， 因 为 此 类 决策 问题 中 ， 各 被 支配 的 
元 素 相 对 于 准则 z 往往 只 有 一 个 定性 的 评价 ， 如 “好 ”、“ 差 ”等 ， 所 以 对 于 多 
个 元 素 排列 ， 区 分 度 不 够 。 

层次 分 析 法 提出 使 用 两 两 比较 的 方式 建立 判断 矩阵 。 设 上 层 元 素 z 支配 的 mm 
个 元 素 为 xi ，2 ，…，xm， 对 于 ij) =1，2，…， 下 ， 以 mw 表 示 和 与 的 关于 xz 的 
影响 之 比 ， 可 得 到 和 矩阵: 


ai CI2 Cln 
4= G21 Ca2m 
Co Ca … 


称 4 为 ，z2，…，xn 关于 xz 两 两 比较 的 判断 矩阵 ， 简 称 判断 矩阵 。 
为 了 便于 操作 ，Saaty 建议 使 用 1 ~ 9 及 其 倒数 共 17 个 数 作为 标 度 来 确定 ai 
的 值 ， 习 惯 称 为 9 标 度 法 。 玫 12-1 为 9 标 度 表 。 
表 12-1 


加 出 是 网 放 本 和 二 1 光 外 


| | | 全 EvE 四 
2 全 6 







xi 比 和 区 极 重要 





显然 ， 两 两 比较 和 矩阵 具有 下 列 性 质 : 

(1) 对 于 任意 册 J=1，2，…，m， 有 ai >0。 
(2) 对 于 任意 间 J=1，2，…，m， 有 ay =1《ai。 
(3) 对 于 任意 i=1， 2，.…, mm ， 有 au =1。 


12.1.3 单 层 权重 计算 
层次 分 析 法 权重 的 计算 采用 的 是 特征 根 法 ， 即 采用 判断 矩阵 最 大 特征 根 对 应 
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的 归 一 化 特征 向 量 为 权重 向 量 。 计 算 方法 如 下 : 
(1) 求 单 一 准则 下 元 素 两 两 比较 的 判断 矩阵 4 = (ay) xno 
(2) 求 4 的 最 大 特征 值 人 .及 其 对 应 的 特征 向 量 芷 = (zu)。 
(3) 将 站 归 一 化 ， 即 





为 保证 权重 的 质量 ， 还 要 对 判断 矩阵 进行 一 致 性 检验 。 检 验方 法 如 下 
(1) 计算 判断 矩阵 4 的 最 大 特征 值 \。。 
(2) 求 一 致 性 指标 C. 工 〈 Consistency Index) : 

人 一 用 





C. 工 = 


丸 一 1 
(3) 查 表 求 相 应 的 平均 随机 一 致 性 指标 R.I_ (Random Index) 。 一 致 性 随机 
指标 表 如 表 12-2 所 示 。 
(4) 计算 一 致 性 比率 C. R. (Consistency Ratio ) : 





(5) 判断 : 当 C. R. <0. 1 时 ， 认 为 判断 矩阵 4 有 满意 一 致 解 ; C.R. >0.1 
时 ， 应 考虑 修正 判断 矩阵 。 


12.1.4 各 层 元 素 对 目标 层 的 合成 权重 计算 


层次 分 析 法 的 最 终 目的 是 求 得 底层 ， 即 方案 层 各 元 素 关 于 目标 层 的 排序 权 
重 。 计 算 方 法 如 下 : 
设 : 已 计算 出 第 类 -1 层 -个 元 素 对 于 目标 的 合成 权重 为 : 
tt-D = (zt D ,aott-0 ,ant-D ) 
第 大 层 的 个 元 素 关于 第 上 -1 层 第 1 个 元 素 的 单一 准则 排序 权重 向 量 为 ; 
9 = (za ac) 
了 =12，mk-1 
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对 应 第 左 层 的 办 个 元 素 是 完全 的 。 当 某 些 元 素 不 受 第 大 -~ 1 层 内 -个 元 素 支 
配 时 ， 相应 的 位 置 用 0 补充 。 于 是 得 到 7 xm -矩阵 : 


(人 昌 ，( 昌 (有 
ZI 112 zw _) 


(用 。 ， 全 
Znil Zni2 取 


计算 出 第 上 层 m” 个 元 素 对 于 目标 的 合成 权重 为 : 


肌 旬 = 权 昌 由 人 -一 全 = Tb 7(t-1) ,ITTG) (2) 


整体 一 致 性 检验 : 
C. 工 计算 公式 为 : 


-1 
必 开 ” 王 瑟 人 名 有 
R. 工 计算 公式 为 : 
ak-1 
用工 二 【也 工 全 瑟 工 各 本 工 名 )w 人 = 铅 邓 ”里 和 
一 致 性 比率 为 : 


C. 工 (6) 
《 闪 。 
C 有 则 = 二 而 





12.2 琐 数 AHPWeightVector ( 单 层 权重 计算 ) 


层次 分 析 法 的 主要 计算 为 特征 值 与 特征 向 量 计算 、 一 致 性 比率 计算 、 和 矩阵 计 
算 等 ， 这 些 都 可 以 用 MATLAB 来 实现 。 


12.2.1 函数 说 明 


函数 语法 : 

[ WeightVector,lamdaMax ,CR] =AHPWeightVector( DecMatrix) 
函数 说 明 : 

AHPWeightVector: 根 据 判 断 矩 阵 计 算 权 重 向 量 

函数 输入 : 

DecMatrix: 判 断 矩 阵 ( 正 互 反 和 矩阵 ) 
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函数 输出 : 
WeightVector: 权 重 向 量 
lamdaMax :最 大 特征 值 
CR: 一 致 性 比率 
如 果 判 断 矩 阵 阶 数 小 于 3 ,返回 0.0 

函数 原 码 ; 
function[ WeightVector,CR] =AHPWeightVector( DecMatrix ) 
%code by ariszheng 2007-11-11 ariszheng@ gmail. com 
和 %AHPWeightVector: 根 据 判 断 矩 阵 计算 权重 向 量 
% 函数 输入 : 
% DecMatrix :判断 矩阵 ( 正 互 反 和 矩阵 ) 
% 函数 输出 : 
%WeightVector: 权 重 向 量 
和 CR: 一 致 性 比率 
% 如 果 判 断 矩 阵 阶 数 小 于 3 ,返回 0.0 
% 判 断 矩 阵 DecMatrix 的 阶 数 
n = size( DecMatrix ,1) ; 
名 计算 特征 向 量 与 特征 值 矩 阵 使 用 eig 天数 
[ Eigenvector,Eigenvalues ] = eig( DecMatrix ) ; 
lamdaMax = 了 上 igenvector; 
从 特征 值 矩阵 中 提取 特征 值 , 即 Eigenvector 的 对 角 元 
Evalues = diag(Eigenvalues ) ; 
% 最 大 特征 值 , 及 其 对 应 的 特征 向 量 
[maxEvalue ,point] = max(Evalues) ; 
WeightVector = Eigenvector( : ,point)/sum(Eigenvector( : ,point) ) ; 
多 随机 一 致 性 指标 阶 数 从 3 ~ 13 
RI = [0. 58 ,0. 90 ,1. 12 ,1. 24 ,1. 32 ,1. 41 ,1. 45 ,1. 49 ,1.51,1.54,1.56]; 
让 n >2 

% 当 阶 数 大 于 2 时 候 计 算 CI、CR 

CI = (maxEvalue -~-n)v(n-1); 

CR = CRI(n -2); 
else 

CR =0.0; 


end 
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1 2 洒 
4=|lM2 1 3 
1 3 1 


编写 MATLAB 程序 TestAHPWeightVectorl. m 
A=[1,2,5;1/2,1 ,3;1《X5 ,1X3 ,1] ; 
disp('DecMatrix =A'"); 
[WeightVector,CR] =AHPWeightVector(A) 
计算 结果 : 
DecMatrix = 人 
WeightVector = 
0. 5816 
0. 3090 
0. 1095 
lamdaMax =3. 0037 
CR =0. 0032 
权重 向 量 为 [0. S816 ,0. 3090 ,0. 1095 ] 
最 大 特征 值 为 3. 0037 
一 致 性 比率 为 0.0032 


12.2.3 函数 示例 (2) 
计算 判断 矩阵 ; 


12.2.2 函数 示例 (1 ) 
计算 乔 断 矩 阵 ， 


1 /人 
4=|lLM2 1 7 
1X/5 17 1 


编写 MATLAB 程序 TestAHPWeightVector2. m 
disp('DecMatrixz =B ) ; 
B=[12.5;1/2,1,7;1/5,17,1]; 
[WeightVector,CR] =AHPWeightVector(B) 
计算 结果 : 

DecMatnx = 了 B 

WeightVector = 
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0. 5415 
0.3816 
0. 0768 
lamdaMax =3,. 1189 
CR =0. 1025 
权重 向 量 为 [0. 5415 ,0. 3816 ,0. 0768 ] 
最 大 特征 值 为 3. 1189 
一 致 性 比率 为 0. 1025 >0.1 


12.3 郴 数 AHPSolver (AHP 求解 函数 ) 


AHPSolver 可 以 根据 递 阶层 次 模型 从 上 到 下 根据 12. 1.4 中 公式 依次 计算 。 
12.3.1 AHPSolver 代码 


function AHPSolver 
% code by ariszheng 2007-11-11 ariszheng@ gmail com 
HierarchyNum = input(' Hierarchy Num of Ahp\n') ; 
NumOfElem = input(' Number of element in every Hierarchy\n ') ; 
weightKtoTop =0; 
for i=1:HierarchyNum -1 

sprintf(' plese input the DecMatrix of % dth Hierarchy ',i) 


k =0; 

while tmue . 
fag =input(' Do you want input DecMatrix in this Hierarehy? 1 or0 \n)); 
让 fag 一 1 


k =k+li 

sprintf(' plese input the 和 dd row 各 dd 由 :DecMatrixz ',,i,k) 
sprintf('the position of 和 SAEO 攻 厅 in %d th za'i) 
DecMatrix(k). DecEle = input(\n'); 

sprintf(' the position of 土 >> 日 8 AHO' 好 in 和 da,i+l) 
DecMatrix(k). SupEle = input('\n') ; 

DecMatrix(k). Matrix = input(' DecMatirc \)) ; 

[ DecMatrix ( k ) . Weight ,DecMatrix (k ) . LamdaMax , DecMatrix 
(k). CR] =AHP 
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WeightVector( DecMatrix(k). Matrix) ; 
disp('the weight of this DecMatrix:') ; 
DecMatrix(k). Weight 
disp('the DecMatrix. LamdaMax :') ; 
DecMatrix(k). LamdaMax 
disp(' DecMatrix. CR:) ; 
DecMatrix(k). CR 
else 
disp('this DecMatrix in this Hierarchy Input over ') ; 
break ; 
end 
end 
ii 一 1; 
weightKtoTop = DecMatrix(1). Weight; 
CR = DecMatrix(1 ). CR; 
else 
for j = 1 :k 
CR = CR + weightKtoTop(j) * DeceMatrix(j). CR; 
end 
U = zeros(NumOfElem(i+1l1) ,NumOfElem(i) ) ; 
for j = 1 :k 
U(DecMatrix(j). SupEle ,j) = DecMatrnix(j). Weight; 
end 
weightKtoTop = U * weightKtoTop ; 
end 
sprintf('the weight of % d Hierarchy element js,i+1); 
weightKtoTop 
end 
end 


12. 3.2 ”AHPSolver 使 用 示例 


例如 ， 某 决策 问题 的 递 阶层 次 结构 如 图 12.3 所 示 。 各 判断 矩阵 如 下 ， 用 
MATILAB 求解 。 
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1 1《3 15 19 
1 2 6 
3 1 12 107 
4=|1X3 1 2|,B= 
$ 2 1 1/4 
l]/6 1l《2 1 
9 7 ll4 1 
1 2 了 1 2 5 
B:=|l[2 1 4|B;=|L2 1 4 
1][7 14 1 1MX 1《3 1 





程序 实例 : 
>> AHPSolver( 调用 AHPSolver 函数 ) 
Hierarchy Num of Ahp(AHP 问题 层 数 ) 
3 
Number of element in every Hierarchy(AHP 每 层 元 素 个 数 ) 
[1,3,7] 
plese input the DecMatrix of lth Hierarchy( 输 入 第 一 层 判 断 和 矩阵 ) 
Do you want input DecMatrix in this Hierarchy? lor0 
1( 继 续 ) 
plese input the 1 row 1 也:DecMatrix( 支 配 元 素 在 第 1 层 的 位 置 ,从 左 向 右 ) 
the position of 支配 元 素 in 1 th 层 
1 位置 1) 
the position of 被 支配 元 素 in 2 层 

[1,2,3]( 位 置 从 左 到 右 ) 
DecMatirx( 判断 矩阵 A) 
[1,3,6;L/3 ,1,2;1/M6,1/2 ,1] 
the weight of this DecMatrix: ( 判断 矩阵 的 权重 ) 

0. 6667 
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0. 2222 

0. 1111 
the DecMatrix. LamdaMax:( 最 大 特征 值 ) 

3 
DecMatrix. CR: (一 致 性 比率 ) 

0 
Do you want input DecMatrix in this Hierarchy? lor 0 
0( 第 一 层 终止 输入 ) 
this DecMatrix in this Hierarchy Input over 
weightKtoTop =( 第 二 层 对 第 一 层 的 权重 ) 

0. 6667 

0. 2222 

0. 1111 
plese input the DeeMatrix of 2th Hierarchy 
Do you want input DecMatrix in this Hierarchy? lor 0 
1( 继 续 ) 
plese input the 2 row 1 也:DecMatrix 
the position of 支配 元 素 i2 由 层 (BL 输入 ) 
1 
the position of 被 支配 元 素 in 3 层 

[1,2,3,4](B2 的 支配 元 素 在 第 三 层 ) 

DecMatirx 
[1,1X3 ,1 ,1/9;3,1,1X2,1X7;5,2,1,1/4;9,7,4,1](Bl) 
the weight of this DecMatrix : 

0. 0478 

0. 1085 

0. 1998 

0. 6439 
the DecMatrix. LamdaMax : 

4. 0891 
DecMatrix. CR : 

0. 0330 
Do you want input DecMatrix in this Hierarchy? lor 0 
1( 继 续 ) 
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plese input the 2 row 2 h;DecMatrix 
the position of 支配 元 素 in 2 th 层 (B2 输入 ) 
2 
the position of 被 支配 元 素 in 3 层 
[3,4,5](B2 支配 第 三 层 的 C3 ,C4,C5 ) 
DecMatirx 
[1,2,7;1《X2,1,4;1Z7,1《X4 ,1] 
the weight of this DecMatrix : 
0. 6026 
0.3150 
0. 0823 
the DecMatrix LamdaMax ; 
3. 0020 
DecMatrix. CR : 
ang 二 
0. 0017 
Do you want input DecMatrix in this Hierarchy? lor0 
1( 继 续 ) 
Plese input the 2 row 3 引 :DecMatrix 
the position of 支配 元 素 in 2 由 层 (B3) 
3 
the position of 被 支配 元 素 in 3 层 
[$,6,7] 
DecMatirx 
[1,2,5;1/2,1,3;1/$,1/3,1](B3) 
the Weight of this DecMatrix : 
0. 5816 
0. 3090 
0. 1095 
the DecMatrix. LamdqdaMax : 
3. 0037 
DecMatrix. CR : 
0. 0032 
Do you want input DecMatrix in this Hierarchy? lor 0 


783 





784 运 等 学 与 最 优化 MATLAB 编程 





0( 结 束 ( 
this DecMatrix in this Hierarchy Input over 
weightKtoTop = (第 三 层 关于 目标 层 的 权重 ) 
0. 0319 
0. 0724 
0. 2671 
0. 4993 
0. 0829 
0. 0343 
0.0122 


第 13 章 遗传 算法 


遗传 算法 是 模拟 生物 在 自然 环境 中 的 遗传 和 进化 过 程 而 形成 的 一 种 自 适 应 全 
局 优化 概率 搜索 算法 。 它 最 早 由 美国 密 执 安 大 学 的 Holland 教授 提出 ， 起 源 于 20 
世纪 60 年 代 对 自然 和 人 工 自 适应 系统 的 研究 。20 世纪 70 年 代 ，De Jong 基于 遗 
传 算法 的 思想 在 计算 机 上 进行 了 大 量 的 纯 数 值 函 数 优化 计算 实验 。 在 一 系列 研究 
工作 的 基础 上 ，20 世纪 80 年 代 ， 由 Coldberg 进行 归纳 总 结 ， 形 成 了 遗传 算法 的 
基本 框架 。 


13.1 遗传 算法 概要 


13.1.1 遗传 算法 模型 


对 于 一 个 求 函 数 最 大 值 的 优化 问题 ， 一 般 可 描述 为 下 述 数学 规划 模型 ; 
max 成 苦 ) 
st 下 ER 
RETU 
式 中 , 巨 = (2 xx) 为 决策 变量 ; 下) 为 目标 本 数 ; 也是 基本 空间 ，R 是 
Z 的 一 个 子 集 。 
遗传 算法 中 ， 将 二 维 决策 向 量 下 = (xxza,…,xw) 用 个 记号 天 (=1,2， 
…m) 所 组 成 的 符号 串 互 来 表示 : 
天 = 厦大 大 二 不 =(xl yx 
把 每 一 个 已 看 作 一 个 遗传 基因 ， 它 的 所 有 可 能 取 值 称 为 等 位 基因 ， 这 样 , 下 就 
可 看 作 是 由 个 遗传 基因 所 组 成 的 一 个 染色 体 。 染 色 体 的 长 度 可 以 是 固定 的 ， 也 
可 以 是 变化 的 。 等 位 基因 可 以 是 一 组 整数 ， 也 可 以 是 某 一 范围 内 的 实数 值 ， 或 者 
是 记号 。 最 简单 的 等 位 基因 是 由 0 和 1 这 两 个 整数 组 成 的 ， 相 应 的 染色 体 就 可 表 
示 为 一 个 二 进 制 符号 串 。 这 种 编码 所 形成 的 排列 形式 互 是 个 体 的 基因 型 ， 与 它 
对 应 的 下 值 是 个 体 的 表现 型 。 染 色 体 下 也 称 为 个 体 互 ， 对 于 每 一 个 个 体 ， 要 按 
照 一 定 的 规则 确定 出 其 适应 度 。 个 体 的 适应 度 与 其 对 应 的 个 体 表 现 型 无 的 目标 
函数 值 相关 联 , 性 越 接近 于 目标 函数 的 最 优点 ， 其 适应 度 越 大 ; 反之 ， 其 适应 度 
越 小 。 
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在 遗传 算法 中 ， 决 策 变量 下 组 成 了 问题 的 解 空 间 。 对 问题 最 优 解 的 搜索 是 
通过 对 染色 体 互 的 搜索 过 程 来 进行 的 ， 从 而 由 所 有 的 染色 体 天 就 组 成 了 问题 的 
搜索 空间 。 

生物 的 进化 是 以 集团 为 主体 的 。 与 此 相对 应 ， 遗 传 算法 的 运算 对 象 是 由 录 
个 个 体 所 组 成 的 集合 ， 称 为 群体 。 与 生物 一 代 一 代 的 自然 进化 过 程 相似 ， 遗 传 算 
法 的 运算 过 程 也 是 一 个 反复 迭代 的 过 程 ， 第 上 代 群 体 记 做 P(t) ， 经 过 一 代 遗 传 
和 进化 后 ， 得 到 第 上 +1 代 群 体 ， 它 们 也 是 由 多 个 个 体 组 成 的 集合 ， 记 做 P(:+ 
1) 。 这 个 群体 不 断 地 经 过 遗传 和 进化 操作 ， 并 且 每 次 都 按照 优胜 劣 汰 的 规则 将 
适应 度 较 高 的 个 体 更 多 地 遗传 到 下 一 代 ， 这 样 最 终 在 群体 中 将 会 得 到 一 个 优良 的 
个 体 互 ， 它 所 对 应 的 表现 型 下 将 达到 或 接近 于 问题 的 最 优 解 。 

生物 的 进化 过 程 主要 是 通过 染色 体 之 间 的 交叉 和 染色 体 的 变异 来 完成 的 。 遗 
传 算法 中 最 优 解 的 搜索 过 程 也 模仿 生物 的 这 个 进化 过 程 ， 使 用 所 谓 的 遗传 算 子 
(Genetic Operators) 作用 于 群体 P(+) 中 ， 进 行 下 述 遗 传 操 作 ， 从 而 得 到 新 一 代 
群体 P(i+1)。 

(1) 选择 (Selection) ; 根据 各 个 个 体 的 适应 度 ， 按 照 一 定 的 规则 或 方法 ， 
从 第 上 代 群 体 P(t) 中 选择 出 一 些 优良 的 个 体 和 遗传 到 下 一 代 群 体 P(t +1) 中 。 

(2) 交叉 〈Crossover) : 将 群体 P(t) 内 的 各 个 个 体 随 机 搭配 成 对 ， 对 每 一 个 
个 体 ， 以 某 个 概率 〈 称 为 交叉 概率 ，Crossover Rate) 交换 它们 之 间 的 部 分 染色 
体 。 

(3) 变异 (Mutation) : 对 群体 P(t) 中 的 每 一 个 个 体 ， 以 某 一 概率 ( 称 为 变 
异 概率 ，Mutation Rate) 改变 某 一 个 或 一 些 基 因 座 上 基因 值 为 其 他 的 等 位 基因 。 


13.1.2 遗传 算法 的 特点 


遗传 算法 是 一 类 可 用 于 复杂 系统 优化 计算 的 鲁 棒 搜 索 算法 ， 与 其 他 一 些 优化 
算法 相 比 ， 主 要 有 下 述 几 个 特点 : 

(1) 遗传 算法 以 决策 变量 的 编码 作为 运算 对 象 。 传 统 的 优化 算法 往往 直接 
利用 决策 变量 的 实际 值 本 身 进 行 优化 计算 ; 但 遗传 算法 不 是 直接 以 决策 变量 的 
值 ， 而 是 以 决策 变量 的 某 种 形式 的 编码 为 运算 对 象 ， 从 而 可 以 很 方便 地 引 人 和 应 
用 遗传 操作 算 子 。 

(2) 遗传 算法 直接 以 目标 函数 值 作为 搜索 信息 。 传 统 的 优化 算法 往往 不 只 
需要 目标 函数 值 ， 还 需要 目标 函数 的 导数 等 其 他 信息 。 这 样 对 许多 目标 函数 无 法 
求 导 或 很 难 求 导 的 函数 ， 遗 传 算法 就 比较 方便 。 

(3) 遗传 算法 同时 进行 解 空间 的 多 点 搜索 。 传 统 的 优化 算法 往往 从 解 空间 
的 一 个 初始 点 开始 搜索 ， 这 样 容易 陷 人 局 部 极 值 点 。 遗 传 算法 进行 群体 搜索 ， 而 
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且 在 搜索 的 过 程 中 引入 遗传 运算 ， 使 群体 可 以 不 断 进化 。 这 些 是 遗传 算法 所 特有 
的 一 种 隐 含 并 行 性 。 

(4) 遗传 算法 使 用 概率 搜索 技术 。 遗 传 算法 属于 一 种 自 适应 概率 搜索 技术 ， 
其 选择 、 交 叉 、 变 异 等 运算 都 是 以 一 种 概率 的 方式 来 进行 的 ， 从 而 增加 了 其 搜索 
过 程 的 灵活 性 。 实 践 和 理论 都 已 证 明了 在 一 定 条 件 下 遗传 算法 总 是 以 概率 1 收敛 
于 问题 的 最 优 解 。 


13.1.3 ”遗传 算法 的 发 展 


20 世纪 60 年 代 ， 美 国 密植 安 大 学 的 Holland 教授 及 其 学 生 们 受到 生物 模拟 
技术 的 启发 ， 创 造 出 了 一 种 基于 生物 遗传 和 进化 机 制 的 适合 于 复杂 系统 计算 优化 
的 自 适应 概率 优化 技术 一 一 遗传 算法 。 下 面 是 在 遗传 算法 的 发 展 进程 中 一 些 关 键 
人 物 所 作出 的 一 些 主 要 贡献 。 

1. 本 了 蔚 Holland 

20 世纪 60 年 代 ，Holland 认识 到 了 生物 的 遗传 和 自然 进化 现象 与 人 工 自 适 
应 系统 的 相似 关系 ， 运 用 生物 遗传 和 进化 的 思想 来 研究 自然 与 人 工 自 适应 系统 的 
生成 以 及 它们 与 环境 的 关系 ， 提 出 在 研究 和 设计 人 工 自 适 应 系统 时 ， 可 以 借鉴 生 
物 遗 传 的 机 制 ， 以 群体 的 方法 进行 自 适应 搜索 ， 并 且 充 分 认识 到 了 交叉 、 变 异 等 
运算 策略 在 自 适 应 系统 中 的 重要 性 。20 世纪 70 年 代 ，Holland 提出 了 遗传 算法 
的 基本 定理 一 一 模式 定理 (Schema Theorem ) ， 韵 定 了 遗传 算法 的 理论 基础 。 
1975 年 ，Holland 出 版 了 第 一 本 系统 论述 遗传 算法 和 人 工 自 适 应 系统 的 专著 《 自 
然 系统 和 人 工 系统 的 自 适 应 性 》( Adaptation in Natural and Artificial Systems) 。20 
世纪 80 年 代 ，Holland 实现 了 第 一 个 基于 遗传 算法 的 机 器 学 习 系 统一 一 分 类 器 系 
统 ， 开 创 了 基于 遗传 算法 学 习 的 新 概念 ， 为 分 类 器 系统 构造 出 了 一 个 完整 的 框 
架 。 

2. 工 D. Bagley 

1967 年 ，Holland 的 学 生 Bagley 在 其 博士 论文 中 首次 提出 了 “遗传 算法 ”一 
词 ， 并 发 表 了 遗传 算法 应 用 方面 的 第 一 篇 论文 。 他 发 展 了 复制 、 交 叉 、 变 异 、 显 
性 、 倒 位 等 遗传 算 子 ， 在 个 体 编码 上 使 用 了 双 倍 体 的 编码 方法 。 这 些 都 与 目前 址 
传 算法 中 所 使 用 的 算 子 和 方法 类 似 。 他 还 敏锐 地 意识 到 了 在 遗传 算法 执行 的 不 同 
阶段 可 以 使 用 不 同 的 选择 率 ， 这 将 有 利于 防止 遗传 算法 的 早熟 现象 ， 从 而 创立 了 
自 适应 遗传 算法 的 概念 。 

3.K A. De Jong 

1975 年 ，De Jong 在 其 博士 论文 中 结合 模式 定理 进行 了 大 量 的 纯 数 值 函数 优 
化 计算 实验 ， 树 立 了 遗传 算法 的 工作 框架 ， 得 到 了 一 些 重要 是 具有 指导 意义 的 结 
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论 。 他 推荐 了 在 大 多 数 优化 问题 中 都 比较 适用 的 遗传 算法 参数 ， 还 建立 了 著名 的 
De Jong 五 函数 测试 平台 ， 定 义 了 评价 遗传 算法 性 能 的 在 线 指标 和 离线 指标 。 

4.D.J Goldberg 

1989 年 ，Goldberg 出 版 了 专著 《搜索 、 优 化 和 机 器 学 习 中 的 遗传 算法 》。 该 
书 系统 总 结 了 遗传 算法 的 主要 研究 成 果 ， 全 面 而 完整 地 论述 了 遗传 算法 的 基本 原 
理 及 其 应 用 。 

5.，L Davis 

1991 年 ，Davis 编辑 出 版 了 《遗传 算法 手册 》， 书 中 包含 了 遗传 算法 在 科学 
计算 、 工 程 技术 和 社会 经 济 中 的 大 量 应 用 实例 ， 该 书 为 推广 和 普及 遗传 算法 的 应 
用 起 到 了 重要 的 指导 作用 。 

6. 丁 R_ Koza 

1992 年 ，Koza 将 遗传 算法 应 用 于 计算 机 程序 的 优化 设计 及 自动 生成 ， 提 出 
了 遗传 编程 的 概念 。Koza 成 功 地 将 提出 的 遗传 编程 方法 应 用 于 人 工 智 能 、 机 器 
学 习 、 符 号 处 理 等 方面 。 


13.1.4 遗传 算法 的 应 用 


遗传 算法 提供 了 一 种 求解 复杂 系统 优化 问题 的 通用 框架 ， 它 不 依赖 于 问题 的 
具体 领域 ， 对 问题 的 种 类 有 很 强 的 鲁 棒 性 ， 所 以 广泛 应 用 于 很 多 学 科 。 下 面 列举 
一 些 遗 传 算法 的 主要 应 用 领域 。 

(1) 函数 优化 。 函 数 优化 是 遗传 算法 的 经 典 应 用 领域 ， 也 是 对 遗传 算法 进 
行 性 能 测试 评价 的 常用 算 例 。 对 于 一 些 非 线性 、 多 模型 、 多 目标 的 函数 优化 问 
题 ， 用 其 他 优化 方法 较 难 求解 ， 而 用 遗传 算法 却 可 以 方便 地 得 到 较 好 的 结果 。 

(2) 组 合 优化 。 遗 传 算法 是 寻求 组 合 优化 问题 满意 解 的 最 佳 工 具 之 一 。 实 
践 证 明 ， 遗 传 算法 对 于 组 合 优化 问题 中 的 NP 完全 问题 非常 有 效 。 

(3) 生产 调度 问题 。 生 产 调度 问题 在 很 多 情况 下 所 建立 起 来 的 数学 模型 难 
以 精确 求解 ， 即 使 经 过 一 些 简化 之 后 可 以 进行 求解 也 会 因 简化 得 太 多 而 使 求解 结 
果 与 实际 相差 太 远 。 现 在 遗传 算法 已 经 成 为 解决 复杂 调度 问题 的 有 效 工 具 。 

(4) 自动 控制 。 遗 传 算法 已 经 在 自动 控制 领域 中 得 到 了 很 好 的 应 用 ， 例 如 
基于 遗传 算法 的 模糊 控制 器 的 优化 设计 ， 基 于 遗传 算法 的 参数 辨识 ， 基 于 遗传 算 
法 的 模糊 控制 规则 的 学 习 ， 利 用 遗传 算法 进行 人 工 神经 网 络 的 结构 优化 设计 和 权 
值 学 习 等 。 

(5) 机 器 人 学 。 机 器 人 是 一 类 复杂 的 难以 精确 建 模 的 人 工 系统 ， 而 遗传 算 
法 的 起 源 就 来 自 于 对 人 工 自 适 应 系统 的 研究 ， 所 以 机 器 人 学 自然 成 为 遗传 算法 的 
一 个 重要 应 用 领域 。 
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(6) 图 像 处 理 。 图 像 处 理 是 计算 机 视觉 中 的 一 个 重要 研究 领域 。 在 图 像 处 
理 过 程 中 ， 如 扫描 、 特 征 提 取 、 图 像 分 割 等 不 可 避免 地 存在 一 些 误 差 ， 这 些 误差 
会 影响 图 像 处 理 的 效果 。 如 何 使 这 些 误 差 最 小 是 使 计算 机 视觉 达到 实用 化 的 重要 
要 求 ， 遗 传 算法 在 这 些 图 像 处 理 的 优化 计算 方面 得 到 了 很 好 的 应 用 。 

(7) 人 工 生命 。 人 工 生命 是 用 计算 机 、 机 械 等 人 工 媒 体 模 拟 或 构造 出 的 具 
有 自然 生物 系统 特有 行为 的 人 造 系统 。 自 组 织 能 力 和 自学 习 能 力 是 人 工 生命 的 两 
大 重要 特征 。 人 工 生命 与 遗传 算法 有 着 密切 的 关系 ， 基 于 遗传 算法 的 进化 模型 是 
研究 人 工 生命 现象 的 重要 理论 基础 。 

(8) 遗传 编程 。Koza 发 展 了 遗传 编程 的 概念 ， 他 使 用 了 以 LISP 语言 所 表示 
的 编码 方法 ， 基 于 对 一 种 树 形 结构 所 进行 的 遗传 操作 来 自动 生成 计算 机 程序 。 

(9) 机 器 学 习 。 基 于 遗传 算法 的 机 器 学 习 ， 在 很 多 领域 中 都 得 到 了 应 用 。 
例如 基于 遗传 算法 的 机 器 学 习 可 用 来 调整 人 工 神经 网 络 的 连接 权 ， 也 可 以 用 于 人 
工 神 经 网 络 的 网 络 结构 优化 设计 。 


13.1.S5 基本 遗传 算法 


基本 遗传 算法 〈Simple Genetic Algorithms，SCA) 是 一 种 统一 的 最 基本 的 遗 
传 算法 ， 它 只 使 用 选择 、 交 叉 、 变 异 这 三 种 基本 遗传 算 子 ， 其 遗传 进化 操作 过 程 
简单 ， 容 易 理解 ， 是 其 他 一 些 遗 传 算法 的 雏形 和 基础 ， 它 不 仅 给 各 种 遗传 算法 提 
供 了 一 个 基本 框架 ， 同 时 也 具有 一 定 的 应 用 价值 。 

1. 本 遗传 算法 的 构成 要 素 

(1) 染色 体 编 码 方法 。 基 本 遗传 算法 使 用 固定 长 度 的 二 进 制 符号 串 来 表示 
群体 中 的 个 体 ， 其 等 位 基因 是 由 二 值 符号 集 10,1|} 组 成 的 。 初 始 群体 中 各 个 个 体 
的 基因 值 可 用 均匀 分 布 的 随机 数 来 生成 。 

(2) 个 体 适 应 度 评 价 。 基 本 遗传 算法 按 与 个 体 适 应 度 成 正比 的 概率 来 决定 
当前 群体 中 每 个 个 体 遗 传 到 下 一 代 群 体 中 的 机 会 的 多 少 。 为 正确 计算 这 个 概率 ， 
这 里 要 求 所 有 个 体 的 适应 度 必 须 为 正 数 或 零 。 

(3) 遗传 算 子 。 基 本 遗传 算法 使 用 下 述 三 种 遗传 算 子 : 选择 运算 使 用 比例 
选择 算 子 ， 交 叉 运 算 使 用 单 点 交叉 算 子 ， 变 异 运算 使 用 基本 位 变异 算 子 或 均匀 变 
异 算 子 。 

(4) 基本 遗传 算法 的 运行 参数 。 基 本 遗传 算法 有 下 述 4 个 运行 参数 需要 提 
前 设 定 : 群体 大 小 允 ， 即 群体 中 所 含 个 体 数 目 ， 一 般 取 为 20 ~ 100;， 遗传 运算 的 
终止 进化 代数 7， 一 般 取 为 100 ~500; 交叉 概率 已， 一 般 取 为 0.4 ~0. 99; 变异 
概率 P.， 一 般 取 为 0.0001 ~0. 1。 

(5) 基本 遗传 算法 的 形式 化 定义 。 基 本 遗传 算法 可 定义 为 一 个 8 元 组 : 


790 ”运筹 学 与 最 优化 MATLAB 编程 


SG4 = (C, 刁 ,P,M, 瑟 ,也 , 更 ,7 

式 中 ，5 为 个 体 的 编码 方法 ; 五 为 个 体 适 应 度 评 价 函 数 ; Po 为 初始 群体 ; 对 为 
群体 大 小 ; 玫 为 选择 算 子 ; 三 为 交叉 算 子 ; 更 为 变异 算 子 ; 7 为 遗传 运算 终止 条 
件 。 

2. 基本 遗传 算法 的 实现 

(1) 个 体 适 应 度 评价 。 在 遗传 算法 中 ， 以 个 体 适 应 度 的 大 小 来 确定 该 个 体 
被 遗传 到 下 一 代 群 体 中 的 概率 。 个 体 适 应 度 越 大 ， 该 个 体 被 遗传 到 下 一 代 的 概率 
也 越 大 ; 反之 ,个 体 的 适应 度 越 小 ， 该 个 体 被 遗传 到 下 一 代 的 概率 也 越 小 。 基 本 
遗传 算法 使 用 比例 选择 算 子 来 确定 群体 中 各 个 个 体 遗 传 到 下 一 代 群 体 中 的 数量 。 
为 正确 计算 不 同情 况 下 各 个 个 体 的 遗传 概率 ， 要 求 所 有 个 体 的 适应 度 必 须 为 正 数 
或 零 ， 不 能 是 负数 。 

为 满足 适应 度 取 非 负 值 的 要 求 ， 基 本 遗传 算法 一 般 采 用 下 面 两 种 方法 之 一 将 
目标 函数 值 妃 x) 变换 为 个 体 的 适应 度 R(x) 。 

方法 1: 对 于 目标 函数 是 求 极 大 化 ， 方 法 为 : 

0) = + Cuo, 当 所 于 ) +Co >0 时 
0, 当 成 X) + Cs<0 时 

式 中 ，C。. 为 一 个 适当 地 相对 比较 小 的 数 ， 它 可 用 下 面 几 种 方法 之 一 来 选取 : 预 
先 指定 的 一 个 较 小 的 数 ; 进化 到 当前 代为 止 的 最 小 目标 函数 值 ; 当前 代 或 最 近 几 
代 群 体 中 的 最 小 目标 值 。 

方法 2: 对 于 求 目 标 函 数 最 小 值 的 优化 问题 ， 变 换 方法 为 : 

FJ) -全 风光 ,当成 T) < C。 时 
, 当 帮 T) 三 C 时 

式 中 ，C。。.. 为 一 个 适当 地 相对 比较 大 的 数 ， 它 可 用 下 面 几 种 方法 之 一 来 选取 : 预 
先 指定 的 一 个 较 大 的 数 ; 进化 到 当前 代为 止 的 最 大 目标 函数 值 ; 当前 代 或 最 近 几 
代 群 体 中 的 最 大 目标 值 。 

(2) 比例 选择 算 子 。 比 例 选 择 实 际 上 是 一 种 有 退还 的 随机 选择 ， 也 叫做 财 
盘 (Roulette Wheel) 选择 ， 因 为 这 种 选择 方式 与 赌博 中 的 赌 盘 操 作 原 理 非 常 相 
似 。 

比例 选择 算 子 的 具体 执行 过 程 是 : 先 计 算出 群体 中 所 有 个 体 的 适应 度 之 和 ; 
其 次 计算 出 每 个 个 体 的 相对 适应 度 的 大 小 ， 此 值 即 为 各 个 个 体 被 遗传 到 下 一 代 群 
体 中 的 概率 ; 最 后 再 使 用 模拟 赌 盘 操 作 〈( 即 0 到 1 之 间 的 随机 数 ) 来 确定 各 个 
个 体 被 选中 的 次 数 。 

(3) 单 点 交叉 算 子 。 单 点 交叉 算 子 是 最 常用 和 最 基本 的 交叉 操作 算 子 。 单 
点 交叉 算 子 的 具体 执行 过 程 如 下 : 对 群体 中 的 个 体 进 行 两 两 随机 配对 ; 对 每 一 对 
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相互 配对 的 个 体 ， 随 机 设置 某 一 基因 座 之 后 的 位 置 为 交叉 点 ; 对 每 一 对 相互 配对 
的 个 体 ， 依 设 定 的 交叉 概率 已. 在 其 交叉 点 处 相互 交换 两 个 个 体 的 部 分 染色 体 ， 
从 而 产生 出 两 个 新 个 体 。 

(4) 基本 位 变异 算 子 。 基 本 位 变异 算 子 的 具体 执行 过 程 为 : 对 个 体 的 每 一 
个 基因 座 ， 依 变异 概率 P。 指定 其 为 变异 点 ; 对 每 一 个 指定 的 变异 点 ， 对 其 基因 
值 做 取 反 运算 或 用 其 他 等 位 基因 值 来 代替 ， 从 而 产生 出 一 个 新 的 个 体 。 

3. 遗传 算法 的 应 用 步 邓 

遗传 算法 提供 了 一 种 求解 复杂 系统 优化 问题 的 通用 框架 。 对 于 具体 问题 ， 可 
按 下 述 步 又 来 构造 : 

(1) 确定 决策 变量 及 其 各 种 约束 条 件 ， 即 确定 出 个 体 的 表现 型 压 和 问题 的 
解 空 间 。 

(2) 建立 优化 模型 ， 即 描述 出 目标 函数 的 类 型 及 其 数学 描述 形式 或 量化 方 
法 。 

(3) 确定 表示 可 行 解 的 染色 体 编 码 方法 ， 即 确定 出 个 体 的 基因 型 于 及 遗传 
算法 的 搜索 空间 。 

(4) 确定 解码 方法 ， 即 确定 出 由 个 体 基 因 型 下 到 个 体 表现 型 下 的 对 应 关系 
或 转换 方法 。 

(5) 确定 个 体 适 应 度 的 量化 评价 方法 ， 即 确定 出 由 目标 函数 值 扎 x) 到 个 体 
适应 度 F(x) 的 转换 规则 。 

(6) 设计 遗传 算 子 ， 即 确定 出 选择 运算 、 交 叉 运 算 、 变 异 运算 等 遗传 算 子 
的 具体 操作 方法 。 

(7) 确定 遗传 算法 的 有 关 运 行 参数 ， 即 确定 出 遗传 算法 的 WH，7，P.，P。 
等 参数 。 


13.1.6 遗传 算法 的 模式 定理 


Holland 提出 的 模式 定理 (Schema Theorem) ， 是 遗传 算法 的 基本 原理 ， 从 进 
化 动力 学 的 角度 提供 了 能 够 较 好 地 解释 遗传 算法 机 理 的 一 种 数学 工具 ， 同 时 也 是 
编码 策略 、 遗 传 策略 等 分 析 的 基础 。 

1. 模式 与 模式 空间 

遗传 算法 将 实际 问题 表示 成 位 串 空 间 ， 以 群体 为 基础 ， 根 据 适 者 生存 的 原 
则 ， 从 中 选择 出 高 适应 值 的 位 串 进行 遗传 操作 ， 产 生出 下 一 代 适 应 性 好 的 位 串 集 
合 ， 从 而 将 整个 群体 不 断 转 移 到 位 串 空间 中 适应 值 高 的 子 集 上 ， 直 到 获得 最 优 
解 。 在 这 一 过 程 中 ， 群 体 中 是 由 哪些 信息 来 指导 和 记忆 寻 优 过 程 的 呢 ? Holland 
发 现 ， 位 串 中 的 某 些 等 位 基因 的 连接 与 适应 值 函 数 之 间 存 在 着 某 种 联系 ， 这 种 联 
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系 提供 了 寻 优 过 程 的 指导 信息 ， 引 导 着 群体 在 位 串 空间 中 的 移动 方向 。 

遗传 算法 在 工作 过 程 中 ， 建 立 并 管理 着 问题 参数 空间 、 位 串 空间 (或 者 称 
为 编码 空间 ) 、 模 式 空间 和 适应 值 空间 等 4 个 空间 及 其 之 间 的 转换 关系 ， 如 图 
13-1 所 示 。 





图 13-!1 


(1) 模式 空间 。 采 用 字符 集 玉 = {0,1| 对 位 串 参 数 进行 二 进 制 编码 ， 位 串 空 
间 表 示 为 $5 = {0,1|“*， 该 空间 的 基数 为 1S:1 =2:。 

扩展 字符 集 K' = 10,1, * | ， 其 中 * 是 通配符 ， 即 可 和 0 或 1 匹配 。 扩 展位 
绅 空间 表示 为 8: = 10,1, * 上， 该 空间 的 基数 为 1S5! = 34。 则 称 8: 为 8: 的 模式 
空间 。 显 然 ， 包 含 2 个 位 囊 的 位 让 空间 ， 对 应 着 3 个 模式 位 串 的 模式 空间 。 

(2) 模式 。 扩 展位 审 空间 8: = 10,1, * 全 中 的 任何 一 个 点 ， 称 为 对 应 于 位 
串 空间 84 = {0,1} 的 一 个 模式 〈Schema) 。 

模式 是 由 S: 中 具有 共同 特征 的 位 串 所 组 成 的 集合 ， 它 描述 了 该 集合 中 位 串 
上 的 共同 基因 特征 。 

例如 ， 模 式 00 * * 表示 位 训 程 度 为 4， 两 个 高 位 基因 为 00 的 位 串 集合 ， 即 
10000 ,0001 ,0010 ,0011 | 。 

(3) 模式 的 阶 。 模 式 的 阶 〈Schema Order) 是 指 模式 中 所 含有 0、! 确定 基 
因 位 的 个 数 ， 记 作 O() 。 

(4) 模式 的 定义 长 度 。 模 式 的 定义 长 度 (Defining Length) 是 指 模式 中 从 左 
到 右 第 一 个 非 * 位 和 最 后 一 个 非 * 位 之 间 的 距离 ， 记 作 8() 。 

(5) 模式 的 维 数 。 模 式 的 维 数 〈 Schema Dimension) 是 指 模式 中 所 包含 的 位 
串 的 个 数 ， 也 称 为 模式 的 容量 ， 记 作 D( 吾 ) ，D( 玉 ) =24-o0 。 

(6) 模式 的 适应 值 。 模 式 在 + 代 群 体 中 包含 的 个 体位 填 为 la aa,…,an| ， 
其 中 四 =m( 瓦 ,) 为 模式 妃 在 第 代 群 体 中 所 包含 位 串 数量 ， 称 为 模式 互 在 群体 
中 的 生存 数量 (Survials) 或 者 采样 样本 〈Samples) ，aj < = 1,2,…,m) ， 则 
模式 互 在 第 + 代 群 体 中 的 适应 值 估计 (简称 模式 的 适应 值 ) 为 : 
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所 吕 ,) = 王 Mo)m 


从 编码 空间 来 看 ，m( 互 ,) 是 当前 群体 中 包含 于 模式 互 的 个 体 数量 ， 反 映 了 
所 对 应 的 模式 空间 的 分 布 情 况 。 该 数量 越 大 ， 说 明 群 体 越 集中 于 模式 马 代 表 的 
子 空间 。 从 模式 空间 来 看 ，m( 瓦 ,) 是 模式 总 在 当前 群体 中 的 个 体 采 样 数量 ， 反 
映 了 所 对 应 的 编码 空间 的 分 布 情况 。 该 数量 越 大 ， 说 明 群 体 中 的 个 体 越 趋向 相似 
和 一 致 ， 在 编码 空间 的 搜索 范围 越 小 。 

例如 ， 模 式 刀 = "101"， 则 0( 百 ) =3，5( 采 ) =2，D( 媚 ) =2520 =25-3 =23? 
可 见 ， 一 个 模式 所 由 位 串 长 度 却 、 阶 0( 吾 ) 、 定 义 长 庆 5( 互 ) 、 容 量 有 (万 ) 

应 值 . 扎 五 ,站 等 5 个 指标 来 描述 。 

站 

遗传 算法 在 群体 进化 过 程 中 ， 可 以 看 作 是 通过 选择 、 交 又 和 变异 算 子 ， 不 断 
发 现 重要 基因 、 寻 找 较 好 模式 的 过 程 。 高 适应 值 的 个 体 被 选择 概率 大 于 低 适 应 值 
的 个 体 。 同 样 ， 根 据 模式 适应 值 的 定义 ， 选 择 算 子 对 于 模式 的 作用 表现 为 : 其 适 
应 值 越 高 ， 被 选择 的 概率 也 就 越 大 ， 所 以 好 的 模式 在 群体 中 的 个 体 采 样 数量 会 不 
断 增加 ， 其 上 的 重要 基因 或 者 有 效 基 因 也 得 以 遗传 下 来 ; 对 交叉 算 子 来 讲 ， 如 果 
它 不 分 割 一 个 模式 ， 则 该 模式 不 变 ， 反 之 可 以 导致 模式 消失 或 所 包含 的 高 适应 值 
个 体 数量 减少 ， 辐 时 交叉 算 子 还 可 以 创建 新 的 模式 。 

变异 算 子 的 变异 率 很 小 ， 对 模式 生成 和 破坏 的 概率 也 很 小 。 

假设 已 为 第 上 代 规 模 为 n 的 群体 ， 则 P(t) = 1ai(t 切 ,az( 人 (tas(t)}。 

(1) 选择 算 子 对 模式 吾 生 存 数量 的 影响 。 假 定 在 上 代 群 体 中 模式 妃 的 生存 
数量 为 m( 瑟 , 世 ， 在 选择 操作 过 程 中 ， 个 体 按 概率 
所 ai) 


>7a) 
被 选择 ， 则 在 第 上 +1 代 ， 模 式 已 的 生存 数 基 为 : 
ma( 五 ,上 ) x 下 X 厂 万 ) 


密 ai) 


Pi = 


mm 五 针 1 ) 世 


将 群体 的 平均 适应 值 表示 为 ， 





故 上 式 可 表示 为 : 
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mm 五 ,t+1) =mm( 万 ,1 x 


该 式 说明 下 一 代 群 体 中 模式 豆 的 生存 数量 与 模式 的 适应 值 成 正比 ， 与 群体 
平均 适应 值 成 反比 。 当 成 五 ) > 六 时, 互 的 生存 数量 增加 ; 当成 五 ) < 大 时, 妃 的 生 
存 数量 减少 。 群 体 中 任 一 模式 的 生存 数量 都 将 在 选择 操作 中 按 上 式 规律 变化 。 

设 几 ip) -F=cf， 其 中 * 为 常数 ， 则 公式 变 为 : 

mm( 五 ,ti+1) =mm(,:) X =m( 克 ,it) xf(1+c) 
群体 从 上 =0 开始 选择 操作 ， 假 设 c 保持 固定 不 变 ， 则 上 式 可 以 表示 为 ; 
mm(,t) =mm( 五 ,0) x(1+c) 

可 以 看 出 ， 在 选择 算 子 作用 下 ， 模 式 的 生存 数量 是 以 迭代 次 数 为 指数 枉 数 方 
式 进 行 变化 的 。 当 ec > 0 时 ， 模 式 的 生存 数量 以 指数 规律 增加 ; 当 c<0 时 ， 生 存 
数量 以 指数 规律 减少 。 这 种 变化 仅仅 是 已 有 模式 生存 数量 的 变化 而 已 ， 并 没有 产 
生 新 的 模式 。 

(2) 交叉 算 子 对 模式 互生 存 数 量 的 影响 。 交 叉 操 作对 模式 的 影响 与 其 定义 
长 度 5( 玉 ) 有 关 。5( 五 ) 越 大 ， 模 式 被 破坏 的 可 能 性 越 大 。 

若 染 色 体 位 串 长 度 为 工 ， 在 单 点 交叉 算 子 作用 下 模式 豆 的 存活 概率 为 ; 





在 交叉 概率 为 p。 的 单 点 交叉 算 子 作用 下 ， 该 模式 的 存活 概率 为 : 
5 有 





Pouriu 之 1 一 Po X 
了 -1 
那么 ， 模 式 妃 在 选择 、 交 叉 算 子 共同 作用 下 的 生存 数量 可 用 下 式 计算 : 
mi( 瑟 ,t+1) 三 (万 ,1 7 xp =m(,t) 7 一 


可 见 ， 在 选择 算 子 、 交 叉 算 子 共同 作用 下 ， 模 式 生存 数量 的 变化 与 其 平均 适 
应 值 及 定义 长 度 8( 五 ) 密 切 相 关 。 当 成 百 ) > 户 且 5( 吾 ) 较 小 时 ， 群 体 中 该 模式 生 
存 数 量 以 指数 规律 增长 ; 反之 则 以 指数 规律 减少 。 

(3) 变异 算 子 对 模式 妃 生 存 数 量 的 影响 。 对 于 群体 中 的 任 一 个 体 ， 变 异 操 
作 就 是 以 概率 已 随机 改变 某 一 基因 位 的 等 位 基因 。 为 了 使 模式 总 在 变异 操作 中 
生存 下 来 ， 其 上 所 有 确定 位 的 等 位 基因 均 不 发 生变 化 的 概率 为 (1 - PP) 。 一 
般 情 况 下 已 .三 1， 所 以 模式 号 的 生存 概率 可 近似 表示 为 ; 

(1-P)20 =1-p xO( 万 ) 

那么 ， 在 选择 、 变 异 算 子 的 共同 作用 下 ， 模 式 的 生存 数量 为 ; 
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mm( 百 ,+1) =mm( 百 ,) xd x(1-p。xO( 厂 )) 
综合 考虑 选择 、 交 叉 和 变异 算 子 的 共同 作用 ， 模 式 的 生存 数量 可 表示 为 : 








mt( 百 ,i +1) 三 到 (五 , 划 人 x(1l1-Pp.x6(5)A(L-I))x(1l -pxO(B) 
忽略 高 次 极 小 项 : 
((P.Xx5( 万 )/( 工 -1)) x(PnxO())) 
上 式 变 为 : 
ml{ 古 ,t+1) 三 m( 瓦 ,1 Re x(1-Pp.x5( 万 )/( 工 -1) -pxO( 歼 ) ) 
3. 模式 定理 


通过 以 上 关于 三 个 遗传 算 子 对 生存 模式 数量 的 影响 分 析 ， 可 以 得 出 如 下 
“模式 定理 " : 在 选择 、 交 叉 、 变 异 算 子 的 作用 下 ， 那 些 低 阶 、 定 义 长 度 短 、 超 
过 群体 平均 适应 值 的 模式 的 生存 数量 ， 将 随 着 和 迭代 次 数 的 增加 以 指数 规律 增长 。 

这 就 是 由 Holland 提出 的 模式 定理 ， 称 之 为 遗传 算法 进化 动力 学 的 基本 原 
理 。 该 定理 反映 了 重要 基因 的 发 现 过 程 。 重 要 基因 的 缔结 对 应 于 较 高 的 适应 值 ， 
说 明了 它们 所 代表 的 个 体 在 下 一 代 有 较 高 的 生存 能 力 ， 是 提高 群体 适应 性 的 进化 
方向 。 


13.2 Genetic Algorithm Toolbox 


13.2.1 函数 概述 


遗传 算法 通过 不 同 的 编码 方式 、 不 同 的 进化 策略 可 以 求解 多 类 型 的 优化 问 
题 ，MATLAB 专门 提供 了 遗传 算法 与 直接 搜索 工具 箱 〈Genetic Algorithm and Di- 
rect Search Toolbox) ， 为 了 用 户 使 用 方便 ， 还 设计 了 用 户 界 面 《GUI) ， 如 图 13-2 
所 示 。 本 章 只 对 其 中 的 Genetic Algorithm Toolbox 进行 介绍 。 
Genetic Algorithm Toolbox 计算 的 标准 形式 为 : 
min 成 世 ) 
st cf(tz)<0 
da(z) =0 
上 .YY< 忆 
4eqd 工 =pBeg 
五 三 zx 三 瑟 
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图 13-2 


这 里 xz, ,beg , 功 ,z5 为 向 量 ，4 为 4e9 为 矩阵 ， 达 z) 为 目标 函数 ，c(x) ,ceg(x) 
为 非 线性 约束 ，4zx < 六，4eqg rz = bed 为 线性 约束 ， 西 二 xz 三 三 为 可 行 解 的 区 间 约 
束 。Genetic Algorithm 是 启发 式 算法 ， 算 法 对 目标 函数 与 约束 函数 的 函数 性 质 没 
特别 要 求 。 


13.2.2 函数 使 用 说 明 及 示例 
下 面 将 用 具体 示例 具体 说 明 函 数 的 使 用 方法 。 例 如 优化 问题 : 


min F= (1- 嫉 +xz3)x4 +xM2 +( 好 一 1) 和 
3. 革 和 +%<] 
%i 十 %a2 =2 
《1) 编写 目标 末 数 GAobjfunl1. m 
functionf = CAobjfunl(x) 
f=(1-x(1)2+x(1) 4《3) *x(1)2+x(1)*x(2)+(-1+x(2)2) *x(2) 
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(2) 约束 画 数 GaConfun. m 

function[ c,ceq】= CaConfun(x) ; 

c=x(1)2 +x(2)2 -1;( 不 等 式 约束 ) 

ceq=x(1) +x(1) -2;( 等 式 约束 ) 

(3) 在 MATLAB 的 命令 窗口 〈Command Window) 输入 gatool 调用 Genetic 
Algorithm Toolbox ( 见 图 13-3 ) 。 





Fl 下 4 De Di iron 


















口 党 | 基 难 力 一 品 | 得 对 加 | 多 Carreht Bireeterr' 旧 运 基 与 优化 :tl ok 畏 程 \ 示 得 序 \ 传 算 法 Th ET ET ] 
Shertews 四 Nov t9 AU 国 mV rs per 
Carrht DiRARET 二 > 更 序 \ 表 做 基 法 _P -X||Cowmand indow  _ 二- 
巴 叶 国画 - 
有 Fles ~ 
GAebjfun m 
Gaabyfun asv 
GAabjfun1 m 
Gacorfur2 m 
Geconfun m 
GADemo1 m 
| 
ml isewy easW ok factisn- 
ests Tt j 
四 4 inie 区 葬 洒 JE 5 
回 wwme 下 tw 
| 口 aepeetwtimm 口 oemueo Da 
( 生 es 本 站 1 Pei meet 
图 13-3 


(4) 输入 目标 函数 与 约束 条 件 〔 见 图 134) 


Cenetlic al1goritha Too] 


了 File Jelp 





了 itness function: 


| amber of vari..， | 2 | 


Constraints: 








Linaar inequalities' 三 
Linear equalities: Aaeqg = 
Bounds: Lower = 


onlinear constraint function- 





图 13-4 
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Fintness function: 适应 函数 ， 即 目标 本 数 

输入 ;， @ GAobijfunl 《目标 函数 的 mm 文件 函数 名 ) 

Numer of vari…. : 变量 个 数 ， 即 优化 问题 中 变量 个 数 

输入 : 2 〈 示 例 问 题 的 变量 个 数 为 2) 

Linear inequalities :线性 不 等 式 约束 

A: 线性 不 等 式 约束 ， 系 数 矩 阵 ; b: 线性 不 等 式 约束 常数 项 

Linear equalities: 线性 等 式 约 东 

Aeq: 线性 不 等 式 约束 ， 系 数 和 矩阵 beq: 线性 等 式 约束 常数 项 

Bounds; 变量 可 行 范围 

Lower: 下 界 ; Upper: 上 界 

输入 方法 1: 直接 输入 数值 矩阵 ， 例 如 (1，2，…，4) 。 

输入 方法 2: 在 Command Window 下 定义 A，…，Upper， 在 操作 界面 
(GUI) 对 应 的 位 置 直 接 输 入 变量 名 称 。 

如 果 空 着 ， 表 示 没 有 相应 的 约束 。 

Nonlinear constraint funetion : 不 等 式 约 束 (等 式 约 束 也 可 以 用 函数 的 形式 给 出 ) 

输入 : @ CaConfun 《约束 函数 m 文件 函数 名 称 ) 

《5) 迭代 过 程 函 数 图 ( 见 图 13-5 ) 


| 也 5ts 


Flot inte.， . 本 


回 Best Eitness 回 Best individual 品 mWistanee 
口 Expectation 器 Genealogy 门 kange = 
口 Seers diversity 口 Sesres 口 Sseetion 
口 Stopping 加 Wux constiaint 
图 13-5 
Plot inte… 图 像 更 新 频率 


输入 : 1， 表 示 算 法 和 迭代 一 次 图 像 更 新 一 次 
Best fitness: 最 优 结 果 图 像 
Best individual ， 最 优 个 体 
Distance: 种 群 个 体 间 臣 离 
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Expectation: 个 体 进 化 比率 

Genealogy : 个 体 宗 系 图 

Range: 适应 函数 值 

Score Diversity : 种 群 得 分 柱状 图 

Scores: 每 代 种 群 适应 性 得 分 

Selection: 显示 哪些 个 体 被 选择 

Stopping: 停止 条 件 准 则 等 级 

Max constraint: 显示 符合 约束 的 程度 

Custom function : 自 定 义 图 像 

具体 可 以 参考 : Cenetic Algorithm Tool Quick reference ( 见 图 136) 


Bei 0 芒 31 Mew 03 Cunwt Beal nd 加 os 





图 136 


《6) 算法 迭代 过 程控 制 及 计算 结果 ( 见 图 13-7) 
Use random states from previousrun: 使 用 先前 迭代 过 程 的 随机 状态 
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un SolLver 人 0 
回 Use random states from previous raun 


ce oo 
Status and resultsl | 





图 13-7 


点 击 Pause: 计算 暂停 ，Pause 变 成 Resume， 点 击 Resume:， 计算 继续 
Status and Results: 显示 计算 状态 与 计算 结果 

函数 最 优 值 : 0. 3638 

Final point:， 迭代 停止 点 

最 优点 : 0. 99921 ，0. 03153 


13.2.3 函数 参数 设置 


(1) 种 群 设置 ( 见 图 13-8) 
Population type: 种 群 类 型 

Double Vector: 实数 向 量 性 

Bit String: 0 -1 串 型 

Custom: 自 定 义 型 

Population size: 种 群 规模 

Creation Funct… : 种 群 个 体 生成 方法 
Uniform: 均匀 分 布 生成 法 

Custom: 自 定 义 型 
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RE 


Shift Linear 
Custom 





Scaling fonction: 评分 函数 
Rank: 排序 法 评分 
Proportional : 进化 度 评分 法 (于 个 体 此 其 如 个 体 进化 的 程度) 
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(3) 选择 策略 〈 见 图 13-10) 


日 Selection 







Saleaction funet | Stochastic umiform | 避 


Roujette 轮 盘 赌 法 
Tourmament ; 竞争 选择 法 
Custom ; 自 定 义 选 择 法 


(4) 繁殖 策略 〈 见 图 13-11 ) 
Bite count : 学 


Crossoyer fract... Fen<x 箭 二 


图 13-11 


ee 






人 


Elite count: 产生 新 个 体 的 母 个 体 数 ' 

Crossover fract… : 交叉 概率 

(5) 停止 条 件 〈 见 图 13-12) 

Generations; 和 迭代 次 数 

Time limit: 时 间 限 制 

Fitness limit: 适应 度 限 制 

Stall generations :最 优 个 体 不 再 进化 次 数 限制 (如果 在 x x 次 迭代 中 最 优 个 
体 不 再 进化 则 和 迭代 停止 。 

Stall time limit， 最 优 个 体 不 再 进化 时 间 限 制 

Function tolerance: 目标 函数 误差 控制 范围 

Nonjinear constrain tolera…: 非 线性 约束 郴 数 误 差 控制 范围 
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.日 Stopping criteria 、 - -  ，- | 
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图 13-12 
(6) 其 他 参数 设置 ( 见 图 13-13) 
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其 他 参数 设置 ， 如 变异 策略 、 算 法 设置 与 混合 函数 设置 具体 可 以 参考 Quick 


reference。 
13. 2.4 遗传 算法 M 文件 自动 生成 


在 Genetic Algorithm tool 一 File 一 Generate M-file 可 以 生成 该 求解 问题 的 X 文 
件 ,比如 命名 为 GADemol. m, 存 在 指定 工作 目录 下 ,以 后 可 以 随时 调用 。 

GADemol. m 程序 

function[X,FVAL,REASON ,OUTPUT,POPULATION ,SCORES] = CADemol 

驴 劝 “This is an auto generated M file to do optimization with the Cenetic Algo- 
rithm and 7 

% Direct Search Toolbox Use GAOPTIMSET for defaujlt CA options structure. 

力 色 Fitness function 

fitnessFunction = @ CAobjfunl ; 

和 和 Number of Variables 

nyars =2; 

铬 Linear inequality constraints 

Aineq =[]; 

Bineq = [; 

2 Linear equality constraints 

Aeq=[]; 

Beq=[]; 

和 % Bounds 

LB=[]; 

UB=[]; 

和 Nonlinear constraints 

nonlconFunction = @ CaConfun; 

加 Start with defaujt options 

options = gaoptimset; 

弛 弛 Modify some parameters 

options = gaoptimset( options，MutationFcn ',j@ mutationgaussian 工 1|); 

options = gaoptimset( options ,' Display',' o 在 )) ; 

options = gaoptimset( options,' PlotFcns ', | @ gaplotbestf@ gaplotbestindiv | ) ; 

和 Set the states of random number generators 

rand{'state ',[0. 29901; 0. 083894; 0. 99927; 0. 33314; 0. 53815;0. 48539;0. 88538;0. 31101 ; 
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0. 57405 ;0. 2643 ;0. 68191 ;0. 98536 ;0. 60708 ;0. 69837 ;0. 98953 ;0. 32555 ; 

0. 92429 ;0.71165 ;0. 38552 ;0. 0097387 ;0. 0075905 ;0. 61386 ;0. 77373 ; 

0. 7406 ;0. 94044 ;0. 55742 ;0. 3987 ;0. 78401 ;0. S1979 ;0. 92262 ;0. S5007 ; 

0. 54655 ;1. 1102e -016;3. 9968e - 015 ;3. 2582e -007 ] ) ; 

randn(' state ',,[2753740601;618774148 ] ) ; 

色色 Run CA 

[X,FVAL,REASON,OUTPUT,POPULATION ,SCORFS ] 
ga( fitnessFunection , nvars, Aineq , Bineq , Aeq, Beq ,LB , UB , nonl- 
conFunction ,options ) ; 


附录 MATLAB 优化 工具 箱 参 数 设置 


1. 优化 工具 箱 参 数 说 明 
优化 工具 箱 参 数 设置 说 明 格式 
序号 ”参数 名 称 


与 该 参数 有 关 的 MATLAB 优化 函数 

(1) BranchStrategy “分支 选择 策略 

Strategy bintprog uses to select branch variable ”整数 规划 分 支 变量 选择 

M 中 等 规模 计算 

Bintprog ”整数 规划 本 数 

(2) DerivativeCheck “导数 检验 

Compare user-suppjied analytic derivatives( gradients or Jacobian)to finite differen- 
cing derivatives 对 有 限 的 导数 (梯度 或 Jacobian 矩阵 ) 进行 分 析 

B ”中 等 规模 或 大 规模 计算 

fgoalattain ,fmincon ,fminimax ,fminunc ,fseminf ,fsolve,lsqcurvefit ,lsqnonlin 

无 约束 优化 ,约束 优化 等 相关 优化 函数 

(3) Diagnostics ”诊断 结果 

Display diagnostic information about the funetion to be minimized or solved. 

输出 函数 最 小 化 或 求解 得 诊断 信息 

B ”中 等 规模 或 大 规模 计算 

All but fminbnd ,fminsearch ,fzero ,and lsqnonmneg 

除 fminbnd ,fminsearch ,fzero ,ljsqnonneg 的 所 有 优化 本 数 

(4) DifMaxChange 导数 最 大 变化 

Maximum change in variables for finite differencing. 

有 限 导 数 的 变量 最 大 变化 , 即 如 果 导 数 超过 该 值 程序 报错 

M - 中 等 规模 计算 

fgoalattain ,fmincon ,fminimax ,fminunc ,fseminf ,faolve ,jsqcurvefit ,jsaqnonlin 

(5) DifftMinChange 导数 最 小 变化 

Minimum change in variabjes for finite differencing 
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有 限 导数 的 变量 最 小 变化 

M 中 等 规模 计算 

fgoalattain ,fmincon ,fminimax ,fminunc ,fseminf ,fsolve ,jsqcurvefit ,lsqnonlin 

(6) Display ”计算 过 程 输出 

Level of display.'off' displays no output; 'iter ' displays' output at each iteration; 
'final displays just the final output;' notify ' displays output only if function does not con- 
VerTge. 

Off: 关 闭 计算 过 程 输出 

Iter: 输 出 每 次 迭代 结果 

Final :只 输出 最 后 结果 

Notify : 当 算 法 不 收敛 的 时 候 输出 结果 

B: 中 等 规模 或 大 规模 计算 

使 用 于 Opimization 的 所 有 优化 算法 

(7) FunValCheck ”函数 值 检验 

Check whether objective function and constraints values are valid. ,on ' displays a 
warning when the objective function or constraints return a value that is complex ,NaN， 
or Inf, Note:FunValCheck does not retur a warmning for Inf when used with fminbnd ， 
fminsearch ,or fzero ,which handle Inf appropriately. 

检查 函数 值 是 否 适 合 ,如 果 是 NaN ,Inf 则 是 不 适合 

B ”中 等 规模 或 大 规模 计算 

eoalattain ,fminbnd ,fmincon ,fminimax ,fminsearch ,fminunc ,faeminf,fsolve ,fzero， 
laqcurvefit ,jsqnonlin 

《8) GoalsExactAchieve 

Specify the number of objectives required for the objective fun to equal the goal 
goal. Objectives should be partitioned into the first few elements of 下 . 

M 中 等 规模 计算 1 

Fgoalattain 

(9) GradConstr 约束 函数 樟 度 

User-defined gradients for the nonlinear constraints， 使 用 者 给 出 的 非 线性 约束 函 
数 梯度 

M 中 等 规模 计算 

fgoalattain ,fmincon ,fminimax 目标 优化 ,最 大 最 小 问题 , 约 东 最 优化 

(10) CradObj ”目标 函数 梯度 

User-definedq gradients for the objective functions。 使 用 者 给 出 的 目标 函数 梯度 
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B ”中 等 规模 或 大 规模 计算 

fgoalattain ,fmincon ,fminimax ,fminunc 

(11) faeminfHessian Hessian 阵 选取 参数 

Ion',function uses user-defined Hessian or Hessian information( when using Hes- 
sMult) ,for the objective function. 入 ' of ,function approximates the Hessian using finite 
differences, 

fseminfHessian no' :使 用 用 户 定 义 的 Hessian 阵 

L 大 规模 计算 

Fmincon ”约束 优化 函数 

(12) fminuncHessMult ”函数 fminune 的 Hesse 乘 子 

User-defined Hessian multiply function. Avoiding Clobal Variabjes via Anonymous 
and Nested Functions explains how to parameterize the Hessian multiply function ,让 nec- 
essary. 

L_ 大 规模 计算 

fmincon ,fminunc 

(13) quadprogHessPattern ”本 数 quadprog 的 Hesse 伴随 矩阵 

Sparsity pattern of the Hessian for finite differencing. The size of the matrix ia n-by- 
n,where n is the number of elements in x0 ,the starting point， 

L 大 规模 计算 - 

Fmincon 

(14) fminunceHessUpdate ”本 数 fminunec 的 Hesse 阵 的 更 新 策略 

Quasi-Newton updating scheme， 拟 牛顿 法 的 Hesse 阵 的 更 新 策略 ,如 DFP、 
BFGS 等 

M 中 等 规模 计算 

Fminune ”无 约束 优化 

(15) InitialHessMatrix ”初始 Hesse 阵 

Initial quasi-Newton matrix. 拟 牛 顿 法 的 初始 Hesse 阵 

M 中 等 规模 计算 

Fminunc ”无 约束 最 优化 

(16) InitialHessType ”初始 Hesse 阵 类 型 

Initial quasi-Newton matrix type， 拟 牛顿 法 的 初始 Hesse 阵 类 型 

M ”中 等 规模 计算 

Fminunc “无 约束 优化 
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(17) Jacobian Jacobian 矩阵 

If'on ',function uses user-defined Jacobian or Jacobian information( when using Ja- 
cobMult ) ,for the objective function. 开 'off ',function approximates the Jacobian using 五- 
nite ifferences， 

B 中 等 规模 或 大 规模 计算 

fsolve ,jsqcurvefit ,1]sqnonlin 

(18) JacobMult Jacobian ”和 矩阵 乘 子 

User-defined Jacobian multiply function. Avoiding Global Variables via Anonymous 
and Nested Functions explains how to parameterize the Jacobian mnultiply function , 让 
necessary. 

L 大 规模 计算 

fsolve ,1sqcurvefit ,lsqlin ,1sqnonlin 

(19 ) JacobPattern Jacobian 伴随 矩阵 

Sparsity pattern of the Jacobian for finite differencing. The size of the matrix is m- 
by-n,where m is the number of values in the first argument returned by the user-speci- 
fied function fun,and n is the number of elements in x0 ,the starting point 

EL 大 规模 计算 

fsolve ,]sqcurvefit ,jsqnonlin 

(20) LargeScale ”大 规模 模式 

Use large-scale algorithm if possible， 必要 的 时 候 使 用 大 规模 算法 

B ”中 等 规模 或 大 规模 计算 

fmincon ,fminunc ,fsolve,jinprog ,lsqcurvefit ,]sqlin ,]sqnonlin ,quadprog 

(21 ) LevenbergMarquardt LevenbergMarquardt 算法 

Choose Levenberg-Marquardt over Causs-Newton algorithm, 'on ' specifies the Lev- 
enberg-Marquardt algorithm.'o 企 ' specifies the Causs-Newton algorithm. 

'on ': 使 用 LevenbergMarquardt 算法 代替 Gauss-Newton 算法 

'off' :默认 使 用 Causs-Newton 算法 

M ”中 等 规模 计算 

lsqcurvefit ,jsqnonjlin 

(22 ) LineSearehType ”线性 搜索 方式 

Line search algorithm choice， 线性 搜索 方式 选择 

M ”中 等 规模 计算 

fsolve ,jsqcurvefit ,lsqnonlin 

(23) MaxFunEvals ”最 大 目标 函数 计算 次 数 
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Maximum number of function evaluations allowed. 

B ”中 等 规模 或 大 规模 计算 

和 goalattain ，fminbnd ，fmincon ，fminimax ，fminsearch ，fminunc ，fseminf ，fsolve， 
lsqcurvefit ,]sqnonjin 

(24) Maxlter 最 大 迭代 次 数 

Maximum number of iterations allowed. 

B 中 等 规模 或 大 规模 计算 

All but fzero and ]sqnonneg 

(25) MaxNodes 最 大 节点 数 (整数 规划 ) ， 

Maximum number of possible solutions , or adom， the binary integer programming 
function bintprog searches. 

M 中 等 规模 计算 

Bintprog 整数 规划 

(26) MaxPCGlter 最 大 共 铂 梯度 迭代 

Maximum number of iterations of preconditioned conjugate gradients method al- 
]owed. 

L 大 规模 计算 

fmincon ,fminunc ,fsolve ,jsqcurvefit ,ljsqlin ,]jsqnonlin ,quadprog 

(27) MaxRLPIter 最 大 线性 规划 和 迭代 次 数 (整数 规划 ) 

Maximum number of iterations of linear programming relaxation method allowed. 

M ”中 等 规模 计算 

Bintprog 

(28) MaxSQPIter 最 大 序列 二 次 归 化 次 数 

Maximum number of iterations of sequential quadratic programming method al- 
]owed. 

M 中 等 规模 计算 

Fmincon 

(29) MaxTime ”函数 最 大 计算 时 间 

Maximum amount of time in seconds allowed for the algorithm. 

M 中 等 规模 计算 : 

Bintprog ”整数 规划 

(30) MeritFunction ”价值 本 数 

Use goal attainment/minimax merit function( multiobjective ) vs. fmincon( single ob- 


jective ) 
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M ”中 等 规模 计算 

fgoajlattain ,fminimax 

(31) MinAbsMax 

Number of F(x)to minimize the worst case absolute values， 

M ”中 等 规模 计算 

minimax 

(32) NodeDisplayJnterval 计算 节点 输出 

Node display interval for bintprog. 

M 中 等 规模 计算 

Bintprog ”整数 规划 

(33) NodeSearchStrategy “节点 搜索 策略 

Search strategy that bintprog uses. 

M 中 等 规模 计算 

Bintprog ”整数 规划 

(34) NonlEqnAlgorithm 非 线性 等 式 算法 

Specify one of the following algorithms for solving nonjinear equations ; 

'dogleg' 一 Trustregion dogleg algorithm( default) 默认 信赖 域 法 

'lm -一 Levenberg-Marquardt Levenberg-Marquardt 法 

' gn ' 一 Causs-Newton 高 斯 牛顿 法 

M 中 等 规模 计算 

Fsolve 

(35) OutputFcn ”输出 本 数 

Specify a user-defined funetion that the optimization function calls at each itera- 
tion. See Output Function。 输出 每 次 迭代 目标 函数 值 

B ”中 等 规模 或 大 规模 计算 

fgoajlattain ,fmincon ,fminimax ,fminunc ,fseminf,fsolve ,]sqcurvefit,]sqnonjin 

(36) PrecondBandWidth 

Upper bandwidth of preconditioner for PCC. 

L 大 规模 计算 

fmincon ,fminunc ,fsolve ,]sqcurvefit ,jsqlin ,ljsqnonlin ,quadprog 

(37) RelLineSrchBnd ”线性 搜索 步 长 

Relative bound on line search step length. 

M ”中 等 规模 计算 

fgoalattain ,fmincon ,fminimax ,fseminf 
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(38) RelLineSrchBndDuration 

Number of iterations for which the bound specified in RelLineSrchBnd should be 
actiVe. 

M 中 等 规模 计算 

fgoalattain ,fmincon ,fminimax ,fseminf 

(39) Simplex 单纯 形 法 

Hf 'on ',function uses the simplex algorithm. 是 否 使 用 单纯 行 法 

M 中 等 规模 计算 

Linprog ”线性 规划 

(40) TolCon ”约束 误差 控制 范围 

Termination tolerance on the constraint violation,， 

B ”中 等 规模 或 大 规模 计算 

bintprog ,fgoalattain ,fmincon ,fminimax ,fseminf 

(41) TolFun ”目标 函数 误差 控制 范围 

Termination tolerance on the function value. 

B ”中 等 规模 或 大 规模 计算 

bintprog , fgoalattain , fmincon , fminimax , fminsearch , fminunc , faeminf , fsolve , lin- 
prog( large-scale only) ,lsqcurvefit,]lsqlin ( large-scale only ) ,jsqnonjlin ,quadprog (large- 
scale only) 

《42) TolPCG，” 巷 梯度 迭代 的 误差 控制 范围 

Termination tolerance on the PCG iteration 

L 大 规模 计算 

fmincon,fminunc ,fsolve,]jsqcurvefit,]sqlin ,lsqnonlin ,quadprog 

(43) TolRLPFun ”线性 松弛 函数 的 误差 控制 范围 

Termination tolerance on the function value of a linear programming relaxation 
problem. 

M 中 等 规模 计算 

Bintprog 

〈44) ToIX 变量 X 的 误差 控制 范围 

Termination tolerance on x. 

B ”中 等 规模 或 大 规模 计算 

AL functions except the medium-scale algorithms for linprog ,lsqlin ,and quadprog 

《45) TolXInteger ”整数 变量 X 的 误差 控制 范围 

Tolerance within which bintprog considers the value of a variable to be an integer. 
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M ”中 等 规模 计算 

Bintprog 

(46) TypicalX 变量 X 的 类 型 

Typical x values. The length of the vector is equal to the number of elements in x0， 
the starting point 与 初始 可 行 点 台 的 类 型 一 致 

B ”中 等 规模 或 大 规模 计算 

fgoalattain ,fmincon ,fminunc ,faolve ,]sqcurvefit ,]sqlin ,jsqnonjlin ,quadprog 

2. 优化 工具 箱 参 数 设置 方法 


设置 函数 : 

options = optimset(' paraml ',valuel ,, param2 ',,value2 ,. .. ) 

设置 参数 格式 : 

(1) Optimization options used by both large-scale and medium-scale algorithms 
大 规模 或 中 等 规模 计算 使 用 的 参数 设置 


1 ) DerivativeCheck 'on '| 上 o 仓 ! 

2) Diagnostics 'on 中 半 o 任 上 Display 'o 企 ' iter 小 final ,notify， 

3) FunValCheckf o 人 中 on 'GradObj'on 和 oo 纤 中 Jacobian 'on 中 }o 任 中 

4) LargeScale'on 小 off'. The default for fsolve is ' off' 

The defaujt for all other functions that provide 8a large-scale algorithm is ' on ， 

算法 函数 默认 都 是 on, 开启 大 规模 算法 

5) MaxFunFEvals Positive integer 正 整 数 

6) MaxJter Positive integer 正 整 数 ， 

” 7) OutputFcn Specify a user-defined function that an optimization function calls at 

each iteration. See Output Function. 

8) TolCon Positive scalar 

9) TolFun Positive scalar 

10) TolX Positive scalar 

11) TypicalX Vector of all ones 

(2) Optimization options used by large-scale algorithms only 

仅 限 大 规模 计算 使 用 的 参数 设置 

1) Hessian 'on'| | o 企 4 

2) HessMujltFunction1 ij[ ]| 

3) HessPattern Sparse matrix | { sparse matrix of all ones| 

4) InitialHessMatrix|'identity 中 1 scaled-identity 小 user-suppjied ， 

5) InitialHessType scalarlvectorl jrj]| 
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6) JacobMult Function1| [ ] |} 

7) JacobPattern Sparse matrix | | sparse matrix of all ones| 稀 朴 矩阵 

8) MaxPCGIter Positive integer| fthe greater of 1 and floor(n/2) ) | where n is the 
number of elements in x0 ,the starting point 

9) PrecondBandWidth Positive integerl110j| 1Inf 

10) TolPCG Positive scalar1{10. 1| 

(3) Optimization options used by medium-scale algorithms only 

仅 限 中 等 规模 计算 使 用 的 参数 设置 

1 ) BranchStrategy ' mininfeas '| }' maxinfeas '} 

2) DiffMaxChange Positive scalarl | 1e-! | 

3) DiftMinChange Positive scalar| | 1e-8| 

4) GoalsExactAchieve Positive scalar integer1101 

5) GradConstr'on '| | o 企 !| 

6) HessUpdatel' bfgs 1 dfp 小 steepdesc 

7) LevenbergMarquardt 'on '| | o 任 ? 

8 》 LineSearchType ' cubicpoly 小 人 quadeubic | 

9) MaxNodes Positive scalar| | 1000 * NumberOfVariables | 

10) MaxRLPIter Positive scalar| | 100 * NumberOfVariables1 

11) MaxSQPiter Positive integer 

12) MaxTime Positive scalar| 17200| MeritFunction singleobj'1t'multiobj 

13 ) MinAbsMax Positive scajlar integer110| 

14) NodeDisplayJnterval Positive scalarl | 20| 

15) NodeSearchStrategy ' df'| | bn 

16) NonlEqnAlgorithmj' dogleg 小 1 lm '| gm where ' lm ' is Levenburg-Marquardt 
and 'gn'is Causs-Newton. 

17) RelLineSrchBnd Real nonnegative scalarlj fj] | 

18) RelLineSrchBndDuration Positive integer| |1} 

19) Simplex 双 hen you set ' Simplex 'to'on 'and 'LargeScale 'to ' off ,fmincon uses 
the simplex algorithm to solve a contrained linear programming problem. 

20) TolRLPFun Positive scalar| | 1e-6| 

21) TolXInteger Positive scalar| | 1e-8 | 

3. 实例 演示 

(1) this statement creates an optimization options structure called options in which 
the Display option is set to ' iter' and the TolFun option is set to le-8 
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输出 算法 迭代 过 程 ,目标 函 数 误差 控制 范围 le-8 , 即 0. 00000001 

设置 方法 为 :options = optimset(' Display ', iter',' TolFun ',1e-8) 

(2) This statement makes a copy of the options structure called options ,changing 
the value of the TolX option and storing new values in optnew 

变量 X 的 误差 控制 范围 修改 为 1e4, 即 0. 0001 

设置 方法 为 :optnew = optimset( options ,TolX' ,le-4) ; 


